Засновником монастиря вважається литовський князь Олександр Ягеллончик. Фундамент основного комплексу було закладено 1497 року. Деякі історики вважають, що цього ж року було зведено дзвонярську вежу. Саме вона збереглася до нашого часу в своєму первозданному вигляді. Спочатку монастир, крім релігійної, виконував оборонну функцію. На його території розташовувалася велика кількість братських келій, при монастирі велося господарство. 1789 року було прийнято рішення перебудувати комплекс. Тоді було добудовано Троїцький костел. На початку ХIХ століття під час великої пожежі в місті монастир і частина келій були зруйновані. Сучасна будівля – це уціліла і дещо відремонтована частина монастиря, яка залишилася з тих часів саме в такому вигліді. Інтер’єр монастиря втрачений повністю. За радянських часів міська влада використовувала приміщення під різні потреби міста. Нині у залах комплексу проводить лекції міське профучилище.