言子為孔子弟子“七十二賢”之一，是孔子門生中唯一的南方人。言子死后就葬在虞山腳下名言子墓。 在常熟市虞山鎮學前街。是祭祀言子（孔子弟子）的專用建筑。始建于宋，重建于元，明成化二十二年（1486年）從明倫堂北移建于文廟東，以后經康熙、乾隆、同治等朝代修葺。言子，字子游，孔子三千弟子中唯一的南方人，被列為“七十二賢”之一。他用所學的文學和禮樂，啟迪東南文化，起到一定的歷史作用，后世稱他為“南方夫子”，在孔廟中設十哲牌位陪祀，言子名列第九。 　　現祠內保存的正殿，木質結構部分仍保持元代型制。殿單檐歇山頂，平面正方形，面闊和進深各3間，通長均為10米。殿柱均為金絲楠木制成。殿南金柱間順梁下面，有“大清同治十一年（1872年），太子太保，武英殿大學士，兩江總督部堂，一等毅勇侯曾國藩督修”的字樣。