Enfrentado al pósito y paredaño al arco del ayuntamiento que da entrada a la plaza, se sitúa la Casa Palacio de los Fernández y Contreras
Los Fernández y Contreras estuvieron emparentados con los Ramírez de Arellano, de Villaescusa de Haro (de esta rama fueron varios obispos todos nacidos en dicho pueblo).
El edificio tiene una fachada del siglo XVI, planta rectangular y patio impluvio central. Según consta en diversos documentos, vivió en ella D. Alonso de Ercilla y Zúñiga (autor de la Araucana) entre 1574 y 1577, mientras se preparaba para profesar como caballero de la Orden de Santiago. Actualmente este edificio es un hotel-restaurante.
El escudo de los Fernández y Contreras se encuentra sobre la puerta de entrada, la mitad es Fernández (como la particularidad de que la torre está invertida) y mitad Contreras (barras verticales en azul y plata).