Історія сучасного палацу Холоневських розпочалася ще в XV столітті, коли на цій території князь Збаразький спорудив фортецю Янів. До кінця століття вона перетворилася на бастіон з вежами, оточений глибоким ровом із водою. Коли в XVIII столітті зникла потреба в будівництві та утриманні захисних споруд, власником став Холоневський і перебудував будівлю. У 80-х роках XVIII століття палац відвідав король Речі Посполитої. Прихід радянської влади спричинив ще одну реконструкцію, а приміщення віддали під адміністративну установу. Потім будівлю перетворили на колонію для малолітніх злочинців, а потім – на дитячий будинок, який став школою-інтернатом.