De Vispoort, een eenvoudig, bakstenen bouwwerk (XIV, verbouwd XV) op rechthoekig grondplan, aan de stadszijde gepleisterd en aan de zeezijde voorzien van een tandfries boven de doorgang, welke mogelijk uit omstreeks 1600 dateert. Aan weerszijden van de poort een langgerekt gedeelte van de middeleeuwse vestingmuur, noordelijk van de poort tot aan het uiterste noordpunt van de oude stad en zuidelijk van de poort tot aan de Rabbestraat.