Cave Gellert je del jam v Gellert Hill. Jama se imenuje "jama svetega Janeza" po puščavnik, ki so živeli tam, in je verjel, da uporabljajo naravne termalne vode v jezeru v bližini jame zdraviti bolne. Verjetno je, da je ta ista voda, ki spadajo v bazen Gellert kopeli.

  V 19. stoletju je bila jama zatočišče za revne družine, ki je, kot sem lahko, za opremo naravno doma. Vhod v jamo je bil zaprt. Ilustracija tega obdobja zgodovine lahko vidite na sliki Mihai Myra, datirane 1860 let fotografij in Gyorgy Klёsha 1877.

  Leta 1920 je skupina menihov, navdih v romarsko kamnitih stavb v Lurd v Franciji, opremiti jamo sam in pretvori vhod. Od 1926 do 1951 je jama služila kot kapela in celo samostana. Med drugo svetovno vojno je bila tu nahaja bolnišnico polja nemške vojske. Leta 1945 je Rdeča armada osvobodila Budimpešta. Pri šestih letih je jama nadaljevala opravljanje verskih funkcij, vendar je v letu 1951 v okviru povečane represije, usmerjenega proti katoliški cerkvi, so varnostni organi javne racijo kapelo. Jama je bila zazidano gor, starejši brat Franz Weser obsojen na smrt, so menihi - na zaporne kazni do največ deset let.

  Kapela je bila ponovno odprli 27. avgust 1989 - debel betonski zid, zapre vhod, je bila uničena. Do leta 1992, je bila kapela obnovljena in spraviti v red. Trenutno so storitve potekala v jami, kljub dejstvu, da je turistična atrakcija.