Josepa Doménica Català de Valeriola (1764-1814), més coneguda com la duquessa d'Almodóvar, va ser una aristòcrata amb un gran llistat de títols. Pel que fa a la Marina Alta, era baronessa de Xaló i Llíber i senyora de Gata de Gorgos. Considerada la dona més rica de València, es tracta d'una dona il·lustrada, amb caràcter emprenedor i inquiet. Va treballar activament en l'educació del poble, amb projectes d'alfabetització. Quan va morir, va donar part del patrimoni per a finançar la construcció d'escoles per tal de pal·liar l'analfabetisme dels més humils.

El palau no es va construir al segle XVIII, sinó molt abans, tal com indica la inscripció que hi ha mur, a la part més alta del palau, on podem llegir la data de construcció de 1598.

Actualment, la casa palau està formada per dues cases grans al carrer Major amb els números 7 i 9, les quals encara conserven en la façana d'estil senyorial, rang de les cases de les persones més riques de la població.

La casa palau també va tindre una torre, en l’actualitat desapareguda i que segons la família Server Giner estaria situada a la part superior de l’actual bar que hi ha al carrer de l'Església. Sabem de l’existència de la torre perquè hi ha un certificat conservat a l’Arxiu de la Diputació Provincial de València que data del 30 d’octubre de l’any 1709, en el qual es deixa al rector de l’església de Xaló el dipòsit d’una campana de la torre del palau de la Vila amb la condició que sempre que el comte ho necessite, li siga tornada la campana al palau. (1)

(1) Vall de Pop (2018) Casa Palau Duquesa de Almodovar. Va de sentits. https://www.vadesentits.com/casa-palau