Las obras que se llevaron a cabo para construir la capilla, debieron afectar no sólo a los restos que aún quedaban de los
Baños Árabes, especialmente la Sala Templada, sino también a la estructura del Palacio edificado por el Conde de Villardompardo.