O nome da cidade data dos anos 500 a.C. e tem dois significados possíveis: “cidade do vento violento” ou “senhor do rio”.

Quem estudou Francês no Secundário lembra-se da canção…

Sur le Pont d’Avignon
On y danse, On y danse
Sur le Pont d’Avignon
On y danse tous en rond

On the bridge of Avignon
We all dance there, we all dance there
On the bridge of Avignon
We all dance there in a ring….

A primeira notícia que se tem de uma ponte no local remonta ao período romano, mas os vestígios não foram encontrados. Em 1177 Bénézet (ou Benedito de Avignon), um jovem pastor propõe ao bispo local a construção de uma ponte que fizesse a ligação entre as duas margens do Rhône, mas sua proposta foi vista com descrença pelo religioso, que mandou o jovem responder por suas ideias perante um juiz. Este, por sua vez, decidiu que se Bénézet conseguisse carregar uma enorme pedra que serviria para a construção da ponte até o local indicado ele seria então autorizado a dar prosseguimento ao seu projeto. Reza a lenda que o jovem conseguiu realizar o feito e foi então autorizado a construir a ponte, arrecando uma boa soma para arcar com o projeto, que contava também com a construção de uma igreja, um cemitério e um hospital. Em 1186 a ponte já era utilizada, mas o hospital teve seu edifício destruído em 1398 e foi transferido pras proximidades