Powstała z połączenia trzech budynków kupionych w połowie XVIII wieku przez kupca i rajcę miejskiego Józefa Bartscha: narożnego Domu Ludwikowskiego (początek XIV w.), kamienicy Waytmanowskiej na rynku i kamienicy Żydowskiej przy ul. Sławkowskiej. W 1773 roku Bartsch wyburzył niektóre fragmenty budynków, połączył w jeden i nadbudował. Kilka lat później w budynku rozpoczął działalność Zajazd Pod Jeleniem, w którym przez kilka dni w 1790 roku mieszkał Wolfgang Goethe, a w 1849 roku car Mikołaj I. Rynek Główny 36.