南潯鎮史館其前身是南潯商會，始建于1926年，為三進中西合璧建筑，占地面積為950平方米，累計費銀三萬余兩，是江南集鎮最早的商會之一。1998年10月，改為南潯鎮史館。2008年上半年，經維修后，其內容調整為輯里湖絲、四象八牛、名家書法、江南絲竹和名人書屋等展廳。

輯里湖絲館：主要展示南潯人自以為傲的輯里湖絲文化。館中陳列了各種關于絲的模型，其中有1915年巴拿馬博覽會上獲得的金獎、錢山漾遺址的老照片、老式絲車等等。一組生動的泥偶從采桑、養蠶、繅絲、交易、獲獎，將一百多年前南潯輯里絲的繁榮活靈活現地表現出來。

四象八牛走廊：展示了南潯一群最杰出的商人，他們由絲發家，最后深深的影響了整個華東地區乃至中國的經濟、文化、藝術、政治。

“中國當代書法名家寫南潯”：展廳展示的是眾多當代書法名家對南潯的感情，他們用名揚宇內的文房之首“湖筆”繪畫出了一幅另類的南潯風情。

江南絲竹館：由表演館與樂器展覽館組成。表演館中有來自湖州師范學院本科畢業的藝術表演學生演奏動人的江南絲竹音樂。樂器展覽館中展示的各式江南絲竹音樂樂器，其中最具代表性的便是唯一存世的最古老的琵琶“唐傳正倉院五弦琵琶（仿品）”。

名人書屋：展示了眾多南潯文人和對南潯有著深厚感情的文人編寫的各類書籍，這些書籍包含了他們對南潯的深深眷戀，也顯示出了南潯作為一個歷史文化古鎮的底蘊。