Інформація про перше спорудження на цьому місці датується кінцем XIV століття. Князь Свидригайло звів тут замок з п’ятьма п’ятикутними баштами, оточений ровом з водою. Згодом палац неодноразово реконструювали. На початку XIX століття нові власники (магнати Сосновські) переробили замок в багату резиденцію. Ще тут були госпбудівлі і каплиця, виконана в неоготичному стилі. Зовнішні обриси каплиці збереглася до наших днів. Вона була оснащена башточками і стрілчастими вікнами. Перш інтер’єр каплиці прикрашала різьба по мармуру, виконана власноруч власником палацу скульптором О. Сосновським. Замок сильно постраждав під час Другої світової війни. До наших днів збереглися тільки руїни палацу, елементи веж, напівзруйнована каплиця і замкові укріплення.