Im Jahr 898 wird zum ersten Mal eine Burg an der Stelle des späteren Klosters erwähnt. 972 gab es bereits eine dem Patrozinium Apostel Petrus unterstellte Kirche. Im Jahr 1006 erwarb die Gräfin Ermetruit von Osona-Cardona vom Grafen Raimund Borrell von Barcelona das Gut Casserres und gründete mit ihrer Schwiegertochter Enúnica ein Kloster, das ebenfalls Petrus gewidmet war. Bereits für das Jahr 1012 ist ein Abt mit dem Namen Acfred überliefert, 1053 wurde die Abteikirche geweiht. Das Kloster wurde zur Grablege der Gründer und anderer Adelsfamilien der Umgebung, die ihm Schenkungen zukommen ließen. Es diente auch als Alterssitz alleinstehender Damen, die dem Kloster ihr Vermögen vererbten, um dafür beim Sterben begleitet zu werden. Da sehr bald weniger als 12 Mönche im Kloster lebten, wurde es 1060 zum Priorat herabgestuft. Im Jahr 1079 wurde das Kloster der Benediktinerabtei von Cluny unterstellt und zum Verwaltungszentrum der Besitztümer Clunys in Katalonien.

Ab dem 14. Jahrhundert wurde es Kommende und der Prior wurde von den Königen von Aragón eingesetzt. Der erste dieser eingesetzten Priore war Pedro de Luna, der spätere Papst Benedikt XIII., der als Gegenpapst in Avignon und Peñíscola residierte. Konflikte mit dem Bischof von Vic, Erdbeben und Bevölkerungsrückgang führten zum Verfall des Klosters. Zu keiner Zeit lebten mehr als 12 oder 13 Personen im Kloster und Ende des 15. Jahrhunderts gab es nur noch zwei Mönche.

1572 wurde das Priorat dem Jesuitenkolleg von Bethlehem in Barcelona unterstellt, zu dem es bis zur Aufhebung des Jesuitenordens durch Karl III. im Jahr 1767 gehörte. Danach war die Anlage in Privatbesitz, bis sie 1991 von der Kreisverwaltung von Osona gekauft wurde. 1994 bis 1998 erfolgte die Restaurierung.