[1] No se tiene mucha documentación del castillo anterior al siglo XV, pero se cree que si bien se cree que ya existía para el siglo XIV, a finales del mismo siglo el rey Enrique IV concedió la jurisdicción del lugar a Alvar Pérez Osorio, yerno de Esteban Pacheco, en agradecimiento por los servicios de este último.
Los primeros dueños de los que se tiene constancia son Alvar Pérez y María Pacheco, justamente a finales del siglo XIV.
En ese mismo año los portugueses atravesaron la frontera y atacaron la ciudad, pero finalmente fueron expulsados.
Durante gran parte del año 1474 hubo varias incursiones portuguesas devastadoras para la zona con el fin de hostigar a sus vecinos, saqueando y destruyendo todo a su paso.
Posteriormente, en 1660 el castillo fue tomado finalmente por los portugueses, siendo necesarios 6.000 infantes y 800 hombres a caballo.