Sinds 11 september 1987 is het gebouw van de visafslag ingericht als (bescheiden) visserijmuseum. Het museum wil een herinnering zijn aan het visserijverleden van Elburg.
De visafslag vormde in de periode 1916-1957 een ontmoetingsplek tussen de Elburger vissers en de kooplui. Na het droogvallen van de polder Oostelijk-Flevoland werd het gebouw van de visafslag in 1958 verkocht aan de familie Spijkerboer in Oosterwolde. Het gebouw werd daar gebruikt als veeschuur en opslagruimte. In 1985 werd het gebouw opgespoord door Willem van Norel. Korte tijd later werden initiatieven ontwikkeld de voormalige visafslag terug te halen naar Elburg. Dat lukte uiteindelijk. Na een grondige restauratie kon het karakteristieke gebouwtje in de zomer van 1987 (opnieuw) geplaatst worden aan de haven van Elburg.