Первое упоминание о монастыре относится к 1460 г, когда на этом месте находилась небольшая деревянная церквушка. Позднее здесь началось строительство целого комплекса с собственной системой фортификаций. На городском вале между Королевским бастионом и Галицкими воротами появился мощный бастион бернардинцев. Это был укрепленный монастырь, окруженный валом и рвом. В 17-18 вв постройки из дерева были заменены на каменные. В 1630 г на территории комплекса появился костел Святого Андрея и здание келий. Вокруг монастыря были воздвигнуты мощные каменные стены, установлены бойницы, построена башня с Глинянскими воротами. Оборонительная система комплекса смогла выдержать не одну жестокую осаду.