In 1405 stichtten enkele uit het Sint-Agathaklooster afkomstige zusters in een huis aan de Oude Delft het Sint-Barbaraklooster. Het groeide uit tot een complex met kapel en verscheidene vleugels, binnenplaatsen en een tuin. De kapel kreeg een opmerkelijke vorm, met een licht geknikte plattegrond en een brede koorpartij aan de straat. In 1579-1580 werd het verbouwd tot weeshuis. De kapel kreeg een tussenvloer en aan de achterzijde een trappenhuis, met van elkaar gescheiden trappen voor weesjongens en weesmeisjes. In 1910 kwam aan de functie van weeshuis een einde. Bouwvallige delen, zoals de koorpartij, werden afgebroken. Andere delen kwamen in gebruik bij de TH Delft. In 1947 werd het complex overgedragen aan de studentenvereniging Sanctus Virgilius, die het stapsgewijs restaureerde en verdwenen delen door nieuwbouw verving. Het torentje kreeg abusievelijk de vorm van het door Vermeer op zijn schilderij Zicht op Delft afgebeelde traptorentje van brouwerij De Papegaai. De herbouw van het gedeelte op de hoek van de Barbarasteeg sloot in 1990 de bouwactiviteiten af.
