Ya en el siglo XII los arzobispos de Colonia poseían en esta localización una hacienda con un bosque para la caza. En el año 1284 el arzobispo Siegfried comenzó a construir aquí un castillo rodeado de un foso, que finalizó en 1298. Bajo el arzobispo Walram este castillo fue reforzado. El castillo existió hasta 1689 cuando los franceses lo hicieron volar por los aires.

El arzobispo Clemente Augusto de Baviera (1700-1761), que pertenecía a la Dinastía de los Wittelsbach, ordenó construir en el lugar donde se encontraban las ruinas antes comentadas, el palacio de Augustusburg. Las obras comenzaron en 1725 según los planos del arquitecto Johann Conrad Schlaun de Westfalia.