最初の城 建設された時期は不明、 11世紀頃から1267年の間には既に建てられていた。1423年にシュヴァーベン帝国自由都市から来た部隊に包囲占領され、完全に破壊された。二代目の城 1454年に、強固な城として建設が開始された。三十年戦争の中頃の1634年にヴュルテンベルク軍に占領され、約1世紀にわたって神聖ローマ帝国のハプスブルク家の城となる。オーストリア継承戦争の1744年の冬から1745年にフランス軍によって占領される。戦後、ハプスブルク家の手に戻ったが、1798年にオーストリア人の最後の所有者が城を去った後は放置され廃墟となった。19世紀初頭までは、聖ミカエル礼拝堂のみ利用可能であった。三代目の城 フリードリヒ・ヴィルヘルム4世が1819年のドイツ南端を通るイタリアへの旅行中、自らのルーツを見つめなおし、城を再建する要求にかられ再建を決めた。