Информация о первом сооружении на этом месте датируется концом XIV века. Князь Свидригайло возвел здесь замок с пятью пятиугольными башнями, окруженный рвом с водой. Впоследствии дворец неоднократно реконструировали. В начале XIX века новые владельцы (магнаты Сосновские) переделали замок в богатую резиденцию. Еще здесь были хозпостройки и часовня, выполненная в неоготическом стиле. Внешние очертания часовни сохранилась до наших дней. Она была оснащена башенками и стрельчатыми окнами. Прежде интерьер часовни украшала резьба по мрамору, выполненная собственноручно владельцем дворца скульптором О. Сосновским. Замок сильно пострадал во время Второй мировой войны. До наших дней сохранились только руины дворца, элементы башен, полуразрушенная часовня и замковые укрепления.