在明清时期，村内有一千多户、四千余人，九十九口古井，九十九条街弄，均是青石铺路，民房全是徽派建筑格式，还有部分元朝和明朝的民居，至今保存完好。古代的石碾、石磨至今仍在使用，成套老家谱完好无损，许多老人还带有古代的生活习性。
南溪古寨由于地处偏僻、交通阻塞，原来长期与世隔绝，直到2004年10月才通乡级公路，更为重要的是受其所处的特殊地形的影响，长期保持着相对封闭的与世隔绝状态，能够在完好地保存了村落的原始状态，至2006年经专家考证后发现，也为后人留下了一笔宝贵的精神财富。
村谱记载，公元前121年，其祖金日磾为驻牧武威的匈奴休屠王太子，随匈奴王浑邪归汉，武帝授以马监侍郎，并赐名金姓。
金氏家族到唐代，为避黄巢之乱，选中南溪，率族人在此安居，至今已有1120多年。村后的石狮旁有一条古徽道，通往江西浮梁。也许，村里人也曾经从这里“浮梁买茶去”。累了渴了，就在路亭里稍作休息，和所有的徽商一样，用过了路亭里的米和水，回来的时候，再满上。匈奴人的野性与斗志渐渐褪去，留下更多的，是徽商的儒雅和诚信。寨子里的房屋大多是粉墙灰瓦马头墙，有门有面的徽派建筑，与皖南民居没有多少分别。只有建于元代的一幢碉楼，仍然保留着些许匈奴民族的烙印。
匈奴人勇猛剽悍，骁勇善战，除了迁徙、作战时住在帐篷里，一般都住碉楼，以便御敌。这幢碉楼墙壁之间的夹角只有60度，如利剑的锋刃直刺蓝天。墙身厚实，门窗窄小，枪眼里似乎随时都有利箭射出。也许，寨子里的匈奴后裔们就曾经在这楼里对外巡视，或许与外敌还有过激战。现在这碉楼已经废弃不用，只有屋檐上飞鹰般的瓦片，仍在默默诉说着匈奴人的往昔心事。
建于明代的大成祠是金氏宗祠，门楣高大，山墙耸立，占地面积1200平方米，共前后三进。明清时期，金氏是当地的名门望族，有不少人在朝廷为官。祠堂内有99根柱子落地，宏伟庄严。不知是想与皇宫媲美，还是另有所图，据说匈奴后裔们原打算在祠堂里建100根柱子，后被人告密，只有将其中一根柱子锯开，使其不落地，这才避开了一劫。不知是有意还是无心，柱子上的雕刻隐隐有龙的形状，石墩上的图案也将匈奴人尚武的特性表露无遗。也许，匈奴人的心思，不过是想像雄鹰般展翅，飞向蓝天，飞向草原吧。寨子里的人终究没有飞走，他们安定下来，过起了闲适的生活。
逢年过节的时候，村里人也和大部分皖南农民一样，在祠堂里唱戏自娱自乐，唱的是温婉的花鼓戏，黄梅调。倒是村民们的脸上，隐约还能看出些微匈奴人的特质。铁骑的声音渐行渐远，这些草原游牧民族的后裔，终于在这里扎下根来，经过千年的碰撞与融合，渐渐与汉人难分彼此。
以上文字转自网络
