Su construcción comenzó en 1123, siendo residencia de obispos durante siglos. Reformado desde los siglos XIV al XVIII, y quedando casi destruido durante las guerras carlistas y en la Guerra Civil.
En 1976, fue reconstruido y restaurado. Actualmente es
Parador Nacional de Turismo.