Museum Haarlem en het ABC Architectuurcentrum zijn samen te vinden in het voormalig Sint Elisabeth’s of Grote Gasthuis. Dit Gasthuis werd gesticht tussen 1350 en 1450 ten behoeve van de zorg voor zieken en armen. De eraan vastliggende Gasthuisjes werden tussen 1608 en 1616 gebouwd. Deze gasthuisjes boden onderdak aan Proveniers; mensen die tegen betaling onderdak en verzorging genoten.
In het ABC Architectuurcentrum worden diverse aspecten op het gebied van architectuur, stedenbouw, landschap, interieur, fotografie, beeldende kunst en tuinarchitectuur belicht.