Desde la calle Llana giramos a la izquierda por la calle Huerta para adentrarnos en uno de los rincones mas pintorescos de la villa como es el Barrio de la Huerta donde vamos a contemplar el prototipo de la arquitectura popular de la Comarca de La Vera y donde se ubica la Casa de la Seda, antigua residencia veraniega de los Duques de Alba.
El "Barrio la Huerta" es un amplio espacio urbano porticado sobre las edificaciones del norte y sostenidos los soportales por fuertes y centenarias vigas de maderas. Es un conjunto urbanístico homogéneo de una belleza sorprendente; como una sensación de túnel que ponga en comunicación la actualidad con la Edad Media. Antes de la restauración del barrio, casi todas las edificaciones aparecen remozadas sus fachadas de cal, arcilla, cemento, ladrillos... y la restauración se hace desnudando la fachada y presentarla de forma originaria.
Popularmente a esta zona se le denomina Barrio Judio o Juderia. Atendiendo a fuentes historicas se sabe que desde tiempos de Alfonso VIII (siglo XII) hay presencia de comunidades judias en la Vera. Estas perduraron hasta tiempo despues cuando en 1474 se observa un documento sobre la recudacion de impuestos por parte del Obispado de Plasencia que habla sobre los judios de La Vera.