Durante los siglos XIV y XV, Sestao, como los demás concejos del Valle de Somorrostro, sufre las consecuencias de las “Guerras de Banderizos”. En este ambiente, hacia el año 1370, Juan López de Salazar, que se había casado con María de Sestao, viuda hacendada del Concejo, construye la Casa-Torre como defensa y lugar de refugio. Así surge la Casa Torre de Sestao de cuatro cubos, toda de sillares, perfectamente cuadrada, con aproximadamente 13 metros de base por unos 14 metros de altura (derribada en 1931). También se construyeron varias ermitas: 9​ San Pedro (en la campa de San Pedro y desaparecida a principios del siglo XX), San Nicolás (que dio nombre a la Punta y derribada hacia 1840), La Piedad (en el barrio de Salcedillo, hoy jurisdicción del Valle de Trápaga y desaparecida al instalarse los talleres de la empresa General Eléctrica) y Nuestra Señora de la Concepción, que levantaba su pequeña estructura en la parte alta del pueblo o Kueto.