Het voormalig raadhuis van Velsen ontstond uit een ca. 1640 gebouwd rechthuis.
Aan het eind van de 19de eeuw werd het verschillende keren uitgebreid.
In 1907 kreeg het gebouw haar kenmerkende voorgevel in Hollandse neorenaissancestijl. Ook intern werd het aangepast.
Door de enorme groei van Velsen zocht men een andere locatie voor een groter gemeentehuis.
Vertraagd door de Tweede Wereldoorlog werd in 1965 een gemeentehuis geopend in het meer centraal gelegen IJmuiden.
Tegenwoordig is Torenstraat 5 in gebruik als kantoor en Torenstraat 7 als atelier- en expositieruimte..