Op de plaats van het huidige kasteel stond vroeger al een kasteel. Dit werd in 1692 aangekocht door Bertrand Vernet, een architect en raadgever van de Franse koning. Eind 18e eeuw werd er een nieuw kasteel als buitenverblijf gebouwd. Het gebouw heeft een eenvoudige voorgevel die wordt onderbroken door een enkele toren, waarin zich de trap bevindt. Het gebouw heeft een hoog, natuurstenen dak. In 1861 erfde Julien de Lavergne de Cerval, een magistraat uit Sarlat, het gebouw. Gedurende dertig jaar wijdde hij zich aan de aanleg van tuinen rond het kasteel. Tijdens de 20e eeuw werden de tuinen verwaarloosd maar aan het eind van de eeuw weer opgeknapt. Na 2010 werd het dak van het kasteel volledig vernieuwd.