La última de ellas en 1980, bajo la dirección del arquitecto Luis Berges Roldán.
Se ha procurado que el edificio conservara su aspecto exterior.
La portada de la fachada principal se eleva sobre escalinata y la componen: dos columnas de orden toscano sobre pedestal, entablamento liso y frontón triangular roto por placa rectangular donde antaño figuró un escudo.
El edificio presenta tres plantas: la primera, ventanas con rejas voladas, la segunda balcones con rejería y la tercera galería de arcos de medio punto. La fachada es de gran armonía y compone un bello conjunto.
En la fachada desde 1560 los blasones del obispo Diego Tavera a los lados del escudo real.
En la Calle Colegio se conserva la portada del Colegio del Santísimo Sacramento, fundado en 1682, formada por pilastras toscanas con sillares labrados y almohadillados, rematada con frontón partido.
Antaño debió residir Diego de Deza, que ocupó, paralelamente a su condición de Obispo de Jaén en 1498, el cargo de Inquisidor General como sucesor del mismísimo Tomás de Torquemada.
En 1862 Isabel II se hospedó aquí ya que era el único edificio aceptable de la ciudad para hospedar a una reina y ello tras realizar amplias obras de reformas y decoración.