Az L alaprajzú épület a XIV- XV. században épült. Többszöri átépítés eredménye a mai barokk kinézete. A város 1800-ban vásárolta meg a házat Lada Annától, a katolikus plébánia részére.
Lada család a XVIII. század első felében döntő szerepet játszott Kőszeg történetében. Lada György az 1720-as években, Lada Ferenc az 1760-as években viselte a városbírói hivatalt. A Rákóczi szabadságharcot követően a Lada család tagjai vettek részt Kőszegről az országgyűlésben. A Kálvária-hegyen álló Szent Donát kápolnát 1715-ben, illetve az 1729-35 között felépült Kálvária templom alapítói között is megtalálhatjuk a család tagjait.
A kőszegi ellenreformációban is döntő szerepet játszott a Lada család. A homlokzatkutatás során két XV. századi címer maradványt találtak a kutatók, az egyiknek csak a címertalpa maradt fenn, a másik Mátyás király által használt cseh címer, ami az uralkodó 1483 januárjában Kőszegen kiadott több oklevelének pecsétjén is jól látható, ez arra utal, hogy a ház a király alkalmi szállása volt.