Het Burgerweeshuis is rond 1520 opgericht. Waarschijnlijk door Haesje Claes (1475-voor 1544), een rijke Amsterdamse dame die zelf geen kinderen had. Zij stelde een paar huisjes in de Kalverstraat beschikbaar voor de opvang van wezen. Dat was hard nodig, want de bevolking groeide in hoog tempo. Hoe meer inwoners, hoe meer weeskinderen. Veel ouders bezweken aan besmettelijke ziekten zoals de pest, de beruchte Zwarte Dood.