Когда монастырь святого Галла Золотая бирюза потерял власть над городом Сант-Галлен, а город перешел под реформацию, встал вопрос о защите католического монастыря. В 1566 году монастырь обнесли стеной, а в 1570 году возвели ворота Карлстор.
Они получили свое название в честь архиепископа Карла Борромео, который посетил монастырь Санкт Галлен 26 и 27 августа 1570 года и являлся первым высшим сановником, проехавшим через новые ворота. Изначально же они носили название Новые ворота, Ворота дома Господня (Gotteshaustor) или Abtstor, т.к. ворота служили для въезда и выезда для аббата.


Договоренность о постройке ворот велась с мэром города. Мэр разрешил обособить и защитить монастырь с несколькими условиями. Во-первых, ключ от ворот должен находится не только у аббата, но и его дубликат должен быть у мэра Во-вторых, монастырь полностью и окончательно должен отказаться от прежней власти, которую имел над городом.



Над воротами существуют комнаты, вероятно в XVII веке их использовали в качестве камер для заключенных. Но с образованием кантона Сант-Галлен, новые власти посчитали, что тесные и холодные комнаты наносят заключенным большой вред здоровью и закрыли их.
В 1960-х годах прилегающие к воротам старые здания были разрушены и возведены новые. В одном из новых соседних зданий расположился полицейский участок, а камеры Карлстора, которые снабжены решетками, используют в качестве камер временного содержания.



На данный момент Карлстор является единственным оставшимися воротами средневековой городской стены Санкт Галлена.
Наиболее поразительной особенностью ворот является большой каменный рельеф, который украшает два верхних этажа восточного фасада. Рядом с дверью слева и справа расположены две каменные львиные головы.



В верхней части ворот распятие Иисуса, по бокам которого изображены Мария и Иоанн. Так же на стене вырезаны изображения папы Пия IV Медичи и национальный герб императора Максимилиана II, которые служили символами свободы аббатства. В центральной части расположен герб Отмара, первого настоятеля и основателя монастыря.