Data del S. XVIII y fue edificado como palacio de los duques de Medinaceli. En los bajos estuvo encarcelado Miguel de Cervantes debido a una supuesta estafa, por lo que, debido a la fecha del encarcelamiento, se cree que "El Quijote" se empezó a tramar entre esos muros.