El 15 de enero de 1388 el Rey Juan I "el Cazador" vendió Agres y su castillo a su mayordomo Andreu Guillem Escrivà. En la segunda mitad del siglo XV pasaron al conde de Cocentaina Joan Roís de Corella y más tarde a la familia Calatayud. En 1512 figuró como señor Joan de Calatayud, y más tarde quedó vinculada al conde de Cirat, que la poseyó hasta la primera mitad del siglo XIX, cuando quedaron suprimidos los señoríos. Agres fue una de las 45 villas de señorío del reino de Valencia y perteneció durante todo el siglo XVIII al Conde de Cirat.