Erstmals wird das an der nördlichen Stadtmauer gelegene Schmidtor 1311 in einer Urkunde erwähnt. Es war Teil der ältesten Stadtbefestigung. 1340 wird es im Zuge der Befestigung der Vorstädte zusammen mit dem Untertor und dem Obertor zum Wehr- und Wachturm ausgebaut. Das Schmidtor hatte fortan den grössten Turm der Stadt. Sein hölzerner Oberbau ragte über die Stadtmauer und den Stadtgraben hinaus. Die ausserordentliche Höhe des Turms ist in der Stadtansicht von 1642 von Matthäus Merian (1593-1650) gut sichtbar. Auf diesem Bild zeigt sich das Schmidtor als hoher Festungsturm mit zwei Erkern. 1607 erteilte der Rat Hans Steinmetz den Auftrag, zwei innere Bögen zu bauen. Das Schmidtor (heute: Ecke Stadthausstrasse / Schmidgasse) war damals der Zugang zum Weinland, nach Schaffhausen und ins Untere Tösstal.