As ruínas do Casarão do Valongo são relíquias do século passado que a Prefeitura está empenhada em preservar. A edificação, formada por dois prédios gêmeos, foi construída com base em rumores de que a sede do Governo da Província de São Paulo seria transferida para Santos. A mudança nunca aconteceu, mas os prédios foram construídos no Largo Marquês de Monte Alegre, então, Largo Monte Alegre.

O primeiro bloco ficou pronto em 1867. Cinco anos depois, o conjunto estava concluído, com o segundo. A construção seguiu o estilo neoclássico, em moda na época, e nela foram utlizados materiais importados, à semelhança dos edifícios oficiais da corte imperial.

Sem a finalidade original, até 1895 o conjunto foi utilizado como residência e, a seguir, abrigou a Intendência de Santos (Prefeitura) e a Câmara, até a inauguração do atual Paço Municipal, em 1939.

De 1940 a 76, os dois blocos, que eram interligados pelo pavimento térreo, foram ocupados por escritórios, bares e hotéis. A partir dos anos 70, a construção entrou em decadência, perdendo, inclusive, os azulejos que decoravam as paredes externas. Dois incêndios, ocorridos em 1985, dois anos após o tombamento pelo Condephaat, e em 92, dois anos após o tombamento pelo Condepasa, reduziram o conjunto às ruínas que conhecemos.