Il Castell de Cabrera è una fortificazione dell'isola di Cabrera, attualmente è un solido molo esagonale, leggermente allungato, situato sulla punta orientale dell'ingresso del suo porto naturale, a un'altitudine di 72 metri sul livello del mare. I successivi attacchi che ha subito nel corso della sua storia fanno pensare che abbia poco a che fare con la costruzione originaria. Solo nel xvi secolo il castello fu distrutto e ricostruito almeno dieci volte. Oltre a presidio militare, è stata torre di quarantena e presidio.

Il pericolo di costruire una torre a Cabrera, dove le possibilità di ritirata in caso di pericolo erano minime, faceva sì che lo stipendio assegnato ad essa era la più alta delle Isole Baleari, e che le sue guardie erano spesso condannate e così commutavano la loro pena.

Il primo riferimento risale al 1410, quando i guardiani della torre Pere e Guillem Saragossa rivendicano il pagamento integrale del loro stipendio dal viceré di Maiorca, quindi a quella data era già operativo e si presume che sia stato costruito in nell'ultima metà del xiv secolo, è possibile che allora non fosse altro che una torre di avvistamento.

Nel 1425, l'utile proprietario di Cabrera, Bernat Saragossa, a nome suo e del Paborde di Tarragona, firmò un accordo con l'Università della Città e Regno di Maiorca per mantenere una guarnigione a difesa del ' illa e il Castello di Cabrera di nuova costruzione, che fa pensare ad un ampliamento della torre originaria.

Nel 1510 due galee berbere attaccarono Cabrera, catturarono i guardiani e ventidue pescatori e distrussero la torre, un improvviso temporale permise l'arrivo dei soccorsi, che liberò i prigionieri.

Nel 1550 Dragut, alla testa di 1500 turchi, prese l'isola, si impadronì dell'artiglieria del castello e demolì completamente l'edificio. Poi, nello stesso secolo, vi fu costruita una cappella dove il clero di Santanyí si recava a celebrare la messa per la guarnigione. Nel 1698, dopo essere stato restaurato e ulteriormente migliorato, il castello passò sotto l'autorità dell'Università di Maiorca.

Nel 1715, nell'ambito della Guerra di Successione, ne fu governatore il militare Francisco Mariscal, a capo di una guarnigione di una ventina di soldati, e gli fu affidata la sorveglianza di possibili incursioni borboniche, in questo contesto fu sparato per l'ultima volta il fuoco dell'artiglieria dalla fortezza. Dal 1716 il castello rimase sotto l'autorità regia.

Alcuni anni fa il castello è stato oggetto di un restauro non troppo riuscito.