Классическое здание эпохи позднего барокко, возведенное в 1720-1730 годах Якубом Фонтаной, у подножия Королевского замка.

Первоначально в этом месте стоял дом, построенный в XVI веке королевским кузнецом и оружейником Вавжиньцем Руффусом. Во II половине XVII века дом был перестроен в дворец по инициативе коронного подкомория Ежи Доминика Любомирского. В последующие годы здание несколько раз перестраивалось, в частности, путем добавления северного крыла, добавления и удаления этажей в крыльях, опускания или поднятия крыши.