Wzniesiony w 1566 roku, przebudowany i nadbudowany w połowie XIX wieku przez Antoniego Stacharskiego. W 1874 roku przekazany przez miasto Czartoryskim na cele muzealne. W 2016 roku wraz z całym kompleksem Muzeum Czartoryskich wykupiony przez Skarb Państwa i przekazany Muzeum Narodowemu w Krakowie.