Det lille runde vindue øverst oppe på Bygningskulturens Hus' facade, er noget af det eneste, der afslører bygningens fortid som skole for nyboderkvarterets pigebørn. Her sad engang et ur, som bestemte frikvartererne for døtrene af flådens mandskab, håndværkere og arbejdere, som boede i Nyboder.

Huset blev tegnet af arkitekten Bernhard Seidelin og opført i 1859. Efter kun 10 år blev hinkeruderne i gården afløst af styltegang og prøvemaster i baggården, da bygningen overgik til at blive først søofficer- og siden kadetskole.

De stribeklædte kadetter, blandt hvem vi en overgang finder både Kronprins Frederik d. 9. og Arveprins Knud, holdt til i bygningen fra 1969 og helt frem til 1939. Herefter fik bygningen en omskiftelig tilværelse og husede blandt andet Finansministeriet, Marineministeriet, Geodætisk institut og advokatfirmaet Lett & Co.

I 2003 købte ejendomsfirmaet Realea A/S bygningen, og efter en omfattende restaurering blev den hovedsæde for Bygningskultur Danmark.