Возведены казармы в 1788 году под руководством коменданта Яна де Витте и архитектора Завадского. До 1816 года в постройке находился городской военный гарнизон. После 1834 года на территории построены хозяйственные здания по проекту архитектора Симеона Учты. Со временем казармы утратили оборонное значение, и на сто лет здание превратилось в госпиталь. После 1918 года сооружение использовали сначала как хлебозавод, а потом – как табачную фабрику. Ныне казармы являются одной из достопримечательностей живописного города Каменец-Подольский.