En la cumbre del monte Zarragoitxi de Bermeo, en un punto fundamental para la vigilancia de los accesos de camino que desde Gernika-Lumo llegaba a la villa, se encuentran los lo que algunos autores afirmas fue el alcazar que los Señores de Bizkaia tenían en la villa de Bermeo. Existen otras teorías que defienden que el alcazar se debía ubicar en el centro del casco medieval de Bermeo, donde actualmente se ubica la Iglesia de Santa Maria de la Asunción.
La existencia del alcazar de los Señores de Bizkaia en Bermeo se conoce gracias a la mención que el historiador Iturriza hizo en su Historia de Vizcaya, describiendo que cuando Alfonso XI visitó Bermeo en 1334 se hospedo en el suntuoso alcazar de los Señores de Bizkaia. Labayru, en cambio, describió el lugar de hospedaje del monarca como un fortín. Independientemente de la ubicación del alcazar, se conoce que la existencia del mismo concluyo cunado el conde vizvaino del Tello (hijo de Alfonso XI) lo cedió para que la villa pudiera construir su muralla.
