La tradición afirma que fue erijido por el Rey Alfonso I, 'El católico' el 21 de Febrero del 746, y de hecho las excavaciones llevadas a cabo al inicio de las obras de conversión del edificio en Parador de Turismo avalan esta idea. Sobre él se fundó el actual monasterio regido por la orden de San Benito hasta la Desamortización de 1835.