O prédio da atual Casa da Cultura foi construído no século XIX e abrigou a primeira escola pública de São Sebastião, conhecido como Grupo Escolar Henrique Botelho. Tem padrões coloniais de arquitetura e contou com três principais técnicas em sua construção: pedra e cal (paredes externas), pau-a-pique (parede dos fundos) e tijolos (divisões internas). Na década de 1950 o prédio sofreu alterações nas suas características originais, porém, nas restaurações de 1994 e 2002, foi realizada a reconstituição de alguns desses elementos. Atualmente abriga um centro cultural com exposições, oficinas culturais e laboratório de informática.