Dufay syntyi Hainautissa nykyisen Belgian alueella ja vietti suurimman osan urastaan Italiassa, missä hän palveli laulajana ja säveltäjänä paavin kappelissa Roomassa ja Esten perheen hovissa Ferrarassa. Hän matkusti myös laajasti ympäri Eurooppaa vieraillessaan Ranskassa, Englannissa ja Alankomaissa.
Dufayn musiikille on ominaista rikas polyfonian käyttö, monimutkaiset rytmit ja ilmeikkäät melodiat. Hän sävelsi laajan valikoiman laulu- ja instrumentaaliteoksia, mukaan lukien messuja, motetteja, maallisia kappaleita ja instrumentaalikappaleita. Hänen musiikkinsa vaikutti erittäin paljon ja auttoi muokkaamaan länsimaisen musiikin kehitystä 1400-luvulla.
Dufay oli myös tärkeä musiikin teoreetikko ja kirjoitti useita musiikista käsitteitä. Hän oli ensimmäinen säveltäjä, joka käytti termiä "musica reservata" kuvaamaan uutta polyfonisen musiikin tyyliä, joka oli monimutkaisempi ja hienostuneempi kuin sen ajan perinteinen polyfonia.
Dufayn musiikkia esitetään ja nautitaan edelleen, ja häntä pidetään yhtenä länsimaisen musiikin historian tärkeimmistä henkilöistä.