Harderwijk kreeg in 1231 stadsrechten. Een van de rechten was het mogen bouwen van stadsmuren. De muren boden ook bescherming tegen de Zuiderzee. De eerste versterking van Harderwijk was een aarden wal met daarop houten palen. In de 14e eeuw werden stadsmuren van baksteen gemaakt. Je kon de stad door 5 poorten binnenkomen: 2 aan de zeezijde en 3 aan de landzijde. De Vischpoort aan de zeezijde staat er nog fraai bij. Van de Smeepoort is slechts een fragment bewaard gebleven. Oorspronkelijk was de Smeepoort een imposant bouwwerk met een binnenpoort en een buitenpoort en ophaalbrug. In 1673 blies de Franse bezetter de Smeepoort op. In 1970 is de poort deels gereconstrueerd. Aan de binnenzijde van de poort is een houten weergang aangebracht. Aan de buitenzijde van de poort zijn 3 ingemetselde vloedstenen te zien. Deze geven de hoogte van het zeewater aan tijdens de stormvloeden in de jaren 1570, 1825 en 1916.