Der Krabbenturm ist Teil der Verteidigungsmauer, die im 15. Jahrhundert den Zugang zum Kanal, der zum Hafen führt, schützt. Der 11 Meter hohe und 9 Meter breite Turm besteht aus einer dicken Mauer aus Feuerstein und Ziegelsteinen. Ursprünglich hieß der Turm Tour du Pollet, weil er in dem Viertel stand, in dem er sich befand. Heute wird er wegen der Schalentiere, die sich bei Ebbe an der Basis des Turms festsetzen, aux Crabes genannt, da der Turm mit den Füßen im Wasser steht.
Während der Turm 1841 abgerissen wurde, ist die Mauer bis heute erhalten geblieben. Im Jahr 2000 wurde eine Gedenktafel angebracht, die an die Rückkehr von Louise Michel aus dem Exil 1880 nach Dieppe erinnert. Sie war die Heldin der Pariser Kommune und verbrachte sieben Jahre im Exil in Neukaledonien.