Au XIIe siècle, Albarracin a été le siège de la Taïfa d'Albarracín. C'est le nom de la dynastie qui y régnait, les Banou Razin, qui par déformation est à l'origine du nom de la ville Albarracin.

La ville est décrétée Monument National en 1961. En 1996, la mairie de la ville reçoit la Médaille d'or du mérite des beaux-arts par le Ministère de l'Éducation, de la Culture et des Sports[1].