Тому Тараса Григоровича поховали на цій горі і назвали її на його честь. Однак сама церква була побудована там набагато раніше – в XVI столітті. Її кілька разів руйнували татари, але за наказом гетьмана Мазепи знову відбудували. Церква вважалася духовним центром цього регіону. Зараз поряд з нею знаходиться козацький меморіал. Зроблена з дерева, церква є відмінним прикладом українського зодчества того періоду, в якому вона була побудована. Сьогодні вона користується великою популярністю у туристів.