Den lille flod Cady uden for bymuren

 

Fort Libéria

Villefranche blev grundlagt med et charter udstedt af greven af Cerdagne, Guillem Ramon, den 9. april 1091[1] (eller 1090[2] eller 1092[3]). Greven boede i Corneilla-de-Conflent, men ønskede at Villefranche skulle være den nye hovedby. Stedet var velvalgt. I den smalle dal hvor den lille flod Cady løber ud i Têt kontrollerer byen adgangen til Conflent[3]. Villefranche blev dog først hovedby i Conflent (og sæde for et viguerie - en domstol der dækkede Conflent og Cerdagne) langt senere i 1126. Det var den helt til det 18. århundrede[4].

I september 1263 beordrede Jakob 1. af Aragonien opførelsen af tre broer over floden Têt. De tre broer blev ødelagt under en voldsom oversvømmelse i 1421, og kun broen Saint-Pierre blev genopført[5].

I det 13., 14. og 15. århundrede blev befæstningerne til stadighed vedligeholdt. I det 14. århundrede blev de udbygget efter en ny plan, som en tekst fra 1411 bevidner[6],[7].

Byen blev belejret og indtaget af Frankrig i 1654. De eksisterende befæstninger blev revet ned, for at de ikke skulle kunne genbruges af spanierne. Situationen ændrede sig med Pyrenæerfreden i 1659. Conflent blev en del af Frankrig, og man påbegyndte anlæggelsen af nye forsvarsværker efter tegninger af Vauban i 1669. Han besøgte selv Villefranche ti år senere[8]. Fort Libéria blev således bygget på en bjergside med fuld udsigt over byen. Arbejdet fortsatte i det 18. århundrede med byggeriet af Porte de France i 1783 og Porte d'Espagne i 1791[9].

Villefranche fik i 1885 jernbaneforbindelse til Perpignan og Prades. I 1909 åbnede en ny jernbaneforbindelse med lille sporbredde til Cerdagne. Fra starten gik den kun til Mont-Louis, i 1911 blev den forlænget til Bourg-Madame og endelig i 1927 til Latour-de-Carol. Her var der forbindelse til den transpyrenæiske jernbane mellem Portet-Saint-Simon i Frankrig og Puigcerdà i Spanien[10].