说起绰墩，大有来历。历史上有两位名人的传奇人生在此留下过的足迹，至今仍不失为一种美谈。清同治《苏州府志》有载：“山上多巨石，三面逶迤而上，独其背矗立三丈余，上有寿宁庵，下为顾瑛金粟堆。……有黄幡绰墓。”

黄幡绰，唐玄宗开元天宝间宫廷第一优人，与雷海星、李龟年、张野狐等都是名倾一时的梨园人物，世称“滑稽之雄”，深得唐皇宠爱。黄幡绰通常是清唱加说，善板。唐玄宗是史上少有的精通音律的皇帝，故有时兴起便击鼓，而黄幡绰则打板伴奏。安禄山兵变后，他流落到江南，死后葬绰墩。昆曲界与说书界，都仰他为始祖。

“唯昆山为正声，乃唐玄宗时黄幡绰所传。”这一句，就把能够追溯到的昆曲最早的“源头”，提前到了1200年前。实际上，顾瑛与黄幡绰的时代差距有六百年之遥，这里说的“所传”两字的含意，乃是指优伶伎艺和音乐成分的传承关系，是指其历史文化传统。黄幡绰把唐代宫廷俳优和梨园歌舞那一套伎乐方式带到了昆山，绰墩村的乡民传承了黄幡绰的流风余韵，在民间生根发芽，直接影响了元明之际昆山的声伎活动。正是由于有这样深沉的历史文化积淀，我们才能论定顾瑛游宴的绰墩地区与昆山腔的起源和形成是有关系的。

另一位传奇人物便是玉山主人顾瑛，从《玉山名胜集》留存的史料来看，玉山雅集的游宴范围确实扩展、延伸到两湖之间的绰墩地区。而且顾瑛在绰墩有祖莹母墓，还兴建了金粟庵，常与宾朋在绰墩聚会。

绰墩原是顾瑛的居留地，据《信义志稿》卷四记载，“顾德辉祖墓在绰墩”。他又葬母于此，庐墓守孝，在墓旁建金粟庵，长期住在庵内。并预筑生圹寿穴，自己死后即葬于绰墩。

绰墩村东面有一个小池塘，池中有一处以桥相通的土丘。顾阿瑛把这片水中坻地叫做小蓬莱，沚上建轩，常在此凭栏钓月。谢应芳《和顾仲瑛金粟塚燕集》有诗云：“清秋携客坟上饮，麹车载酒山童推。”殷奎《顾玉山金粟塚秋宴集》云：“始登金粟塚，仰见端正月。”这都证见绰墩是顾瑛招待宾客的游宴之地，文人雅兴，莫过于此。

绰墩遗址初现时举国惊动，如今的绰墩山村依然平和安静，历史留下的痕迹不会被时间抹去，世代相颂的明贤传说也不会被人们忘记，绰墩山上的故事还在继续。