Козловська фортеця була однією з 16 фортець Української укріпленої лінії, протяжність якої становила 285 км. Спочатку вона називалася Дрієцькою або, згідно з іншими даними, Крутоярською. У 1738 році була перейменована на честь Козловського кінного полку, який розташовувався на цій оборонній ділянці. Фортеця зводилася по однотипному проекту всіх споруд Української лінії. Вона земляна і в плані прямокутна. Мала чотири бастіони по всьому периметру. Вал фортеці був невисоким – близько трьох метрів. Нині можна побачити лише його частину висотою в два метри, а також неглибокі рови. Своє стратегічне значення укріпленняя швидко втратило і вже в 70-х роках XVIII століття його використовували як поштовий пункт запорізькі козаки. Нині знайти колишню фортецю можна поблизу 105-го кілометра залізничної ділянки Дніпропетровськ - Красноград на правому березі річки Берестової. А з висоти пташиного польоту добре проглядаються контури колишньої будови.