La première collection du musée de l’Aventure du Son a été léguée en 1994 par M. Armand Nogues, ancien maire de la commune de Saint-Fargeau. Pierre Bordier, maire, s’est rapidement engagé à libérer l’ancienne mairie pour accueillir la collection devenue publique. Le bâtiment affecté au musée est un ancien couvent des visitandinnes aménagé sous la IIIe République en mairie.

En 1995, une première série d’appareils issue de la collection Nogues est exposée au rez-de-chaussée du musée.

Une large place est également consacrée à l’histoire de la reproduction du son, depuis les premières expériences , début du 19ème siècle jusqu’au jusqu’aux méthodes découvertes dans les années 1960.

En 2000, le Conseil général, partenaire privilégié de la commune avec notamment sa Conservation des musées de l’Yonne achète une collection de phonographes, de radios, d’instruments de musique mécanique à Lanobre dans le Cantal et favorise ainsi l’émergence d’une collection publique exceptionnelle en France et en Europe pour le plus grand intérêt des visiteurs. Aujourd’hui, le musée de l’aventure du son occupe l’essentiel de l’ancien couvent.