Pierwszy budynek w stylu gotyckim powstał w XV wieku w ciągu kazimierskich murów. Po pożarze w połowie XVI wieku roku została odbudowana według renesansowego projektu Mateo Gucciego. Restaurowana na początku XIX wieku (do wybuchu I wojny) według planów Zygmunta Hendla. Zdewastowana podczas II wojny światowej prze Niemców. Wyremontowana w latach 50. W 1958 przekazana przez Kongregację Wyznania Mojżeszowego na cele muzealne.