Van welk bouwjaar de panden zijn is niet geheel duidelijk. De gemeente Haarlem geeft 1630 en de Vereniging Hendrick de Keyser geeft 1606 als bouwjaar. Vermoedelijk werden de panden gebouwd naar aanleiding van een brand in de brouwerij in 1606. De brouwerij bestond rond 1550 in ieder geval al. De brouwerij is tot 1668 actief geweest.
Na het sluiten van de brouwerij werd het pand in 1688 gesplitst, het linker gebouw werd vermoedelijk al sinds de bouw als bedrijfspand gebruikt. Na de splitsing werd Frederik Clinghenbergh de eigenaar en gebruikte het als ververij. Het rechter gebouw werd gekocht door toen voormalig schepen Hendrick Duyst van Voorhout. Het pand was tot 1668 vermoedelijk de woning van de brouwer en Duyst van Voorhout heeft het ook als zodanig gebruikt. Rond 1750 werd het pand gemoderniseerd, onder andere marmeren schoorsteenmantels en houten lambriseringen weren geplaatst.
In 1889 waren er plannen om het hoekhuis te slopen, dit kon niet doorgaan omdat de twee panden te veel met elkaar verbonden zijn. Uiteindelijk werden er een boven- en benedenwoning in het pand aangebracht. Ook werd het pand aan de achterkant uitgebreid. De panden kwamen in 1929 in handen van de Vereniging Hendrick de Keyser, deze heeft de panden tussen 1968 en 1976 laten restaureren.
