Фортеця Каркассонн веде свій початок з фортифікаційних споруд гало-римського періоду[1]. Фортеця оточена подвійним рядом мурів, довжина яких становить близько 3 км. Над мурами височать 52 вежі[2]. На території міста розташований графський замок та базиліка Святого Назарія.

1247 року фортеця Каркассонн була захоплена військом Французького королівства й тривалий час була важливим форпостом на кордоні з Арагонським королівством.

1659 року за Піренейським договором провінція Руссійон стала частиною Франції й місто втратило своє стратегічне значення[3]. Фортеця прийшла з часом в занепад, а саме місто Каркассонн стало важиливм центром текстильного виробництва, зокрема виробництва вовни.

1849 року французький уряд вирішив зруйнувати фортифікаційні споруди Каркассонна, проте це рішення викликало значний спротив місцевого населення. Археолог Жан-П'єр Кро-Мерв'єй та письменник Проспер Меріме розгорнули широку кампанію за визнання Каркассоннської фортеці історичною пам'яткою. З часом уряд скасував своє рішення, й 1853 року почалися реставраційні роботи комплексу. Реконструкція проводилася під керівництвом відомого архітектора Ежена Віолле-ле-Дюка[4]. Проект реконструкції Віолле-ле-Дюка ще за його життя різко критикувався, як невідповідний до клімату й традицій регіону. Після його смерті 1879 року реставраційні роботи продовжив його учень Поль Бесвільвальд, а пізніше — архітектор Ноде[5]. Реставрацію було завершено наприкінці XIX століття.

З 1997 року Сіте входить до Списку світової спадщини ЮНЕСКО[6][7]. Замок, фортифікаційні будови, ристалище та вежі перебувають у власності держави і є історичними пам'ятками Франції. Інша частина Сіте знаходиться в управлінні муніципальної влади.