Der Bau des Heiligen Tores erfolgte am Ende des 13. Jahrhunderts. Die ganze Stadt war damals von zwei bis drei massiven Befestigungsstreifen umgeben. In einigen Abschnitten wurde vor den Stadtmauern auch ein doppelt gemauerter Graben erbaut. Durch das Steinportal des Heiligen Tors kamen nicht nur die Händlergruppen in die Stadt, die durch das Erzgebirge nach Sachsen oder durch das Eger-Tal nach Eger /Cheb und Nürnberg fuhren, sondern auch Monarchen bei ihren Besuchen der Stadt Kadaň, darunter Wenzel II., Karl IV., Ferdinand I. und Joseph II. Das Heilige Tor trennt die Altstadt von Kadaň und den Vorort Neustadt. Eine Kopie der spätgotischen Statue der Schwarzen Mutter Gottes befindet sich in der barocken Nische des Durchgangs des Heiligen Tors.

Im Mittelalter war das Heilige Tor noch mit einem System von Torbögen ausgestattet, das aus zwei kleineren Toren und einer angrenzenden halbrunden Bastei bestand.

Auf einem der Eckpfeiler des Heiligen Tors können Sie ein Relief mit einem Teil einer Figur finden. Das Werk wird Victor Bernstein zugeschrieben, einem Kaadener Künstler aus der Wende des 16. und 17. Jahrhunderts, und ist wahrscheinlich eine Karikatur eines der damaligen Kaadener Geistlichen. Bernstein schuf seine Werke hauptsächlich nachts, um anonym zu bleiben, und normalerweise an den Fassaden von Stadthäusern. Er war unter den Einwohnern der Stadt berühmt für seine spöttischen und zweideutigen Gemälde und Karikaturen angesehener Vertreter der Stadt und der Kirche.

Der Turm des Heiligen Tors ist seit 2016 für die Öffentlichkeit zugänglich. Obwohl es auf den ersten Blick so aussehen kann, als ob es von hier aus keine so schöne Aussicht wie vom Rathaus gibt, kann er mit einer völlig anderen Perspektive überraschen. Zum Beispiel sind von der obersten Etage die Kaadener Vogelhäuschen sichtbar, die ursprünglichen Lagerhäuser für Schießpulver und Kugeln, in denen die Scharfschützen eingesetzt wurden.