De visserij is één van de belangrijkste welvaartsbronnen voor Zierikzee geweest.In het midden van de 17de eeuw bestond de vloot uit bijna 100 schepen. De gevangen vis werd in Zierikzee aan wal gebracht en verkocht. Vandaar werd de vangst naar onder andere Brabant en Vlaanderen verhandeld. In de loop van de 18de eeuw werd de vissersvloot steeds kleiner. De concurrentie met de steden langs de Maasmonding was niet vol te houden. In 1804 werd de vismarkt verplaatst naar het hofje van het Sint Jacobsgilde.