Князь Острозький обрав дуже вдале місце для будівництва – природний трикутник, який утворився від злиття двох річок. Від міста замковий комплекс відгородив глибокий рів із водою. За ним знаходився вал з бастіонами для гарматної стрільби. Вхід був лише один –в’їзною брамою з підйомним дерев’яним мостом. Висота всієї будови досягала шести метрів, а товщина стін становила майже два. Татари так і не змогли взяти фортецю приступом, хоча постійно здійснювали на неї навали, оскільки вона стояла на їхньому "Чорному шляху". Відомо, що в 1618 році замок Острозького витримав 30-тисячну облогу орди. За часів козацтва він страждав від військових протистоянь із поляками. Сьогодні від фортечного комплексу залишилися палац, оборонна вежа, нижній ярус Троїцької церкви, північна брама й підвальні приміщення з колодязями-камерами, які ведуть до річки. Церква нині діє та належить до Київського патріархату. Замок досі реставрують, а також на його території ведуть археологічні розкопки.