Ugyan alapja a XV. századból való, ám az akkoriban itt állt épületről igen keveset tudni, lévén a többi vizivárosi épülethez hasonlóan szinte teljesen megsemmisült a város 1686-os visszafoglalásakor. Mostani arculatát Dankó András építőmesternek köszönheti, aki egy görög kereskedőnek alakítatta át a házat. Kapisztory úr -első gazdája kiről aztán a ház a nevét kapta- azonban hamar túladott rajta, s nemsokára a Szép Ilonka nevü bár, majd Buda egyik legnagyobb forgalmú vendéglője, Friedl Ede cukrászdája nyilik meg benne. A II. világháborúban egy része teljesen elpusztul. 1951 és 1953 között Hell Géza vezetésével állítják helyre.
