Наприкінці XVII століття, після вигнання турків з Поділля чимало вірмен переселилося в Жванець Кам’янець-Подільського району. У цей період розпочато будівництво майбутнього храму – костелу Діви Марії, який спочатку замислювався як оборонна споруда. Тому храм іноді називають вірменською фортецею. Потужні стіни неодноразово допомагали місцевому населенню під час нападів завойовників, виконуючи фортифікаційну функцію. Коли вірмени покинули місцевість, фортецю перебудували на костел. За радянських часів храм закрили, натомість розмістивши у будівлі фабрику. Нині над будівлею поетапно працюють реставратори. Храм віднайшов колишнє призначення, в святині регулярно проводяться служби.