Existen numerosos vestigios de poblados, principalmente celtibéricos en el paraje de nuestra Sra de los olmos y del
castillo.
En el cerro de
Santa Cruz también hay restos de un poblado y distribuidos por el término, topónimos como los villares, las paritejas...
La máxima importancia de
Tornos, debido a su situación fronteriza es en la Edad Media debido al castillo, propiedad de la Corona aragonesa. Jaime II tuvo especiales atenciones con los habitantes de Tornos. El castillo desempeñó un papel importante en las guerras contra Castilla, principalmente en la de los Dos Pedros. También prestó un gran servicio a la Corona al negarse a entregar el castillo a los unionistas, en 1347.
En Tornos se asentaron
familias nobles e infanzonas desde muy antiguo, tal como demuestran los
escudos, las
casas solariegas, los censos de 1373 y de 1495, los matrimonios a fuero de nobles...
Vemos la importancia del
pueblo en el siglo XVIII, así en la cofradía de los Esclavos de Nra. Sra de los Olmos, estaban inscritas personas de diversas procedencias: de los
pueblos limítrofes, de
Aragón, incluso una nutrida representación de
Madrid, por lo que reclamaban un hermano Mayor de Madrid.