Багато років тому село Кременівка мало зовсім іншу назву. Історичне ім’я цього місця – Чердакли. Площа території ботанічної пам’ятки природи Чердакли складає біля 200 гектарів. Він представляє собою кам’янистий степ: гранітні ділянки зустрічаються у вигляді скель на схилах долини річки Кальчик, покритих різнотрав’ям. Рослинність відповідає петрофітним або каменистим степам. Вісім видів рослин, що тут ростуть, занесені в Червону книгу України. Серед них: простріл, грабельки Бекетова. Статус пам’ятки природи присвоєно в 1993 році.