В XII веке здесь обосновалась резиденция Ольговичей, которые координировали оборону восточных рубежей Киевской Руси. Жили, как положено князьям, в замке, возведенном тут же, на холме. Поэтому холм и получил название Замковая гора. Въезд на территорию был полностью подконтрольным и возможным лишь через единственные ворота. Внутри была выстроена церковь, вокруг разрасталось поселение. Однако предпринятые оборонительные меры со временем дали сбой, и крепость в XIV веке перешла в руки литовских князей, в XVI – отошла к Московии, затем – к полякам, и уже позже была отвоеванная Хмельницким. В XVIII веке крепость заняли подопечные Петра Первого. А когда сооружение утратило стратегическое значение, то его попросту ликвидировали. Сейчас в память о событиях прошлых лет здесь заложен памятный знак и установлен памятник Бояну – автору "Слова о полку Игореве".