1340 begann Pedro Fernández de Castro mit dem Bau einer neuen Burganlage. Rodrigo Osorio nahm die Burg 1480 gewaltsam in Besitz und zettelte eine Rebellion gegen das Königshaus an. Die königlichen Truppen belagerten daraufhin die Burg und eroberten sie 1486 zurück .Ab 1850 begann der Niedergang der Burg: Die Stadtverwaltung verkaufte die Mauern und verwendete sie als Baumaterial. Der Burghof wurde teils als Weideland vermietet, zeitweise auch als Fußballfeld genutzt. Im Jahr 1924 wurde die Burg zum nationalen Baudenkmal (Bien de Interés Cultural) ernannt und unter Schutz gestellt.