A sua construção iniciou-se em 1567, sob o patrocínio do arcebispo D. Frei Bartolomeu dos Mártires, para o colégio da Companhia de Jesus. O colégio funcionou até ao ano de 1759. Em 1884, o edifício foi cedido à arquidiocese, que aí instalou o Seminário de São Tiago.
