A kora XX. századi neobarokk épület első tulajdonosa Kormos Ilona orfeumi magánénekesnő volt. Halála után az épület az Irgalmas Rendhez került. Ám az államosítások után az ORFI kórházhoz csatolták és kórházi könyvtárként működött, mígnem 1956 februárjában az egyik szintjén ki nem alakítottak egy orvostörténeti könyvtárat. A '60-as évekre már az egész épületre kiterjedt az új funkció. Az itt tárolt gyűjteményben többek közt XVI. századi könyvritkaságok, illetve az orvosi és gyógyszerészeti iratok mellett zoológiával, nyelvészettel és démonológiával foglalkozó írások is találhatóak.