L'idée d’un Musée de la Pêche germe d’abord dans l’esprit de Pierre Guéguin, maire de Concarneau, avant même la seconde guerre mondiale. Une vingtaine d’années plus tard, le peintre nantais Charles Viaud, reprend le projet. Pour fonder le musée, il se rapproche d’un cercle de passionnés de patrimoine maritime, composé de Marcel Chevannes, armateur, Jean Bruneau, peintre et Émile Le Tendre, libraire et imprimeur. Le groupe crée en avril 1961 l’Association des Amis du Musée de la Pêche de Concarneau. Cette même année, la municipalité leur confie les clefs des anciens bâtiments de l’école de pêche à l’entrée de la Ville Close.

Le musée ouvre ses portes le 8 juillet 1961, il est alors le premier consacré à ce thème, en France.

Le Musée de la Pêche s’attache à l’origine à l’histoire maritime et aux techniques de pêche locales. Constitué sans collections, il pallie ce manque grâce à la générosité des Concarnois, pourvoyeurs de nombreux objets par le biais de dons ou de prêts (bateaux, outils, engins de pêche, vêtements, appareils de navigation). Il réunit également un ensemble de spécimens zoologiques (poissons, tortues, mammifères aquatiques). À la mort de Charles Viaud, en 1975, Hervé Gloux prend la tête du musée. Ce maquettiste de profession, enrichit les collections de nouveaux objets et organise d’importants travaux de restauration et d’aménagement des espaces d’exposition.