La construcción este edificio es obra del arquitecto Hernan Ruiz “el viejo” para la cofradía de San Sebastián entre 1513 y 1516.

La cofradía fue auspiciada por el Cabildo Catedralicio y el hospital estaba dedicado a enfermos con demencia y contagiosos.

En el siglo XIX se cambio el uso para ser dedicado como casa orfanato, como respuesta ante la cantidad de abandonos de niños recién nacidos que se hacían en los márgenes del río Guadalquivir.

La portada del edificio corresponde con el estilo arquitectónico del gótico humanista de Córdoba. La capilla es de estilo gótico-flamígero, de una sola nave con decoración plateresca, presidida por un retablo del siglo XVIII de Teodosio Sánchez Rueda.

El patio de planta cuadrangular en dos niveles con arcos de medio punto y estilo mudéjar.

En 1986 se convierte en el Palacio de Congresos y Exposiciones, en sus bajos se encuentra la Oficina Municipal de Turismo.