1 大模型写诗不行、评诗行不行？
我深信钟振振先生对于旧体诗写作的论说：知好歹。人写诗如此，AI写诗大致也是如此。
几年前我对于“九歌”给了一个超过70%诗人水平的论断，对于近两年时髦的大模型所写旧体诗的评价要低于“九歌”，然而由于大模型发展畸快，倒几乎不太敢妄言了，但虽然不敢，在此也鼓足勇气说一句“大模型写诗不如人”。
写诗不行，评诗行不行？给一堆诗排个序行不行呢？
当年研究“九歌”的算法时，知道它是用到LOSS函数作为一个评价数值来排序的，由此可知，“九歌”写诗也是基于优劣的判断和排序的。“九歌”的BERT框架虽不同于GPT，但从根上说也是transformer，因此大模型想必也是内含一个优劣的判断，而这个优劣判断是否合理呢？
需要试试。
测试一
杜甫的《登高》号称古今第一七律，不妨拿来作为样本：
风急天高猿啸哀， 渚清沙白鸟飞回。
无边落木萧萧下， 不尽长江滚滚来。
万里悲秋常作客，百年多病独登台。
艰难苦恨繁霜鬓， 潦倒新停浊酒杯。
再拿一首拙作相比较：《洗衣机》，该诗在某全国性诗词大赛上获得过三等奖。
红颜紫绶两相邻，不洗轻狂只洗尘。
王谢衣冠揉一处，清明领袖忍三轮。
藏污不易风流卷，遗恨惜如云水皴。
总恨青衫不常湿，西施曾是浣纱人。
以下为提示词（该提示词也是AI给出的）：
请根据以下六个评估维度，用表格形式给出最终得分（百分制）：
1.创作手法:包括对诗词格律、平仄压韵的遵循,以及对典故、借代等技巧的运用。
2.语言表达:评价用词的精炼质朴、优美流畅,以及对词语音韵的处理是否到位。
3.思想内涵:诗句所蕴含的哲理思想、人生感悟、情操风貌等深层内涵。
4.意境构思:诗人如何通过景物描写、联想引申营造出意蕴悠远的艺术意境。
5.创新性:诗作是否在题材、手法、语言等方面有创新之处,是否打破陈规呈现新的风格面貌。
6.时代影响:诗作是否能够反映当时的社会风尚、文化特色以及诗人的生平体验。
所评诗词为：
1登高
风急天高猿啸哀， 渚清沙白鸟飞回。
无边落木萧萧下， 不尽长江滚滚来。
万里悲秋常作客，百年多病独登台。
艰难苦恨繁霜鬓， 潦倒新停浊酒杯。
2洗衣机
红颜紫绶两相邻，不洗轻狂只洗尘。
王谢衣冠揉一处，清明领袖忍三轮。
藏污不易风流卷，遗恨惜如云水皴。
总恨青衫不常湿，西施曾是浣纱人。
拙作是某次诗歌大赛的得奖作品，但和杜作相比，自有天差地别。而使用大模型智谱清言的智能体进行评价，结果如下：
根据您提供的两首现代旧体诗《登高》和《洗衣机》，我将从六个评估维度进行评分。请注意，这些评分是基于我对诗词的理解和鉴赏，可能与其他鉴赏家的观点有所不同。
以下是大模型的评语:
### 《登高》
1. **创作手法**: 95 - 严格遵循诗词格律，平仄压韵精准，典故运用得当。
2. **语言表达**: 90 - 用词精炼，音韵优美，表达流畅。
3. **思想内涵**: 85 - 蕴含深刻的哲理和人生感悟，表现出诗人内心的孤独和悲凉。
4. **意境构思**: 90 - 通过景物描写和联想，营造出意蕴深远的艺术意境。
5. **创新性**: 88 - 在传统题材上有新的表现手法，风格独特。
6. **时代影响**: 85 - 反映了诗人对当时社会风尚和文化的深刻理解。
### 《洗衣机》
1. **创作手法**: 90 - 格律严谨，平仄和谐，但典故运用略显生硬。
2. **语言表达**: 85 - 用词新颖，但部分表达略显晦涩。
3. **思想内涵**: 80 - 有一定深度，但哲理表达不够清晰。
4. **意境构思**: 82 - 意境新颖，但整体构思略显牵强。
5. **创新性**: 87 - 题材新颖，表现手法有创新。
6. **时代影响**: 83 - 反映了现代生活的一面，但文化特色不够突出。
总体来说，两首诗各有特色。《登高》在传统诗词的格律和意境上表现更为出色，而《洗衣机》则在题材和表现手法上展现了创新。这些评分仅供参考，不同鉴赏家可能会有不同的评价。
从评分上看，大方向上大模型没有问题，在每一个维度上，杜作的得分都高于拙作。只是得分差有点少，拙作与杜作的巨大差距显然没有体现出来。从评语上看，杜作的评价明显高于拙作。
如此看来，大模型似乎是“知好歹”的。
但有一个问题，大模型是真的“知好歹”，还是他的所谓“知好歹”是被训练，被告知的呢？比如杜作本身就是名作，网上对于它的好评本已存在，会不会是被各种网络文字训练出来的大模型早已经被告知了杜作的出色呢？
需要接着试试。
测试二
这个测试的样本取自《风骚榜》，这是我从2018年选评的现代人创作的旧体诗词，在我的审美中，堪称佳作，但在网络内容环境中远没有比肩古人名作的好评。上榜作品按体裁各有十首上榜，并有排序。现已当前七律榜上的十首作品给大模型评价：
以下为提示词：
请根据以下六个评估维度，用表格形式给出最终得分（百分制）：
1.创作手法:包括对诗词格律、平仄压韵的遵循,以及对典故、借代等技巧的运用。
2.语言表达:评价用词的精炼质朴、优美流畅,以及对词语音韵的处理是否到位。
3.思想内涵:诗句所蕴含的哲理思想、人生感悟、情操风貌等深层内涵。
4.意境构思:诗人如何通过景物描写、联想引申营造出意蕴悠远的艺术意境。
5.创新性:诗作是否在题材、手法、语言等方面有创新之处,是否打破陈规呈现新的风格面貌。
6.时代影响:诗作是否能够反映当时的社会风尚、文化特色以及诗人的生平体验。
所评诗词为：
第一 火锅 / 渔唱起三更（八闽诗社）
循天霜气漫相摧，聊荐红炉就冻醅。但乞肴蔬同入镬，长吁寒暖一持杯。齑盐淡口贫无剩，风露关心愁自煨。惟觉残汤兼百味，沉底思绪忍翻回。
第二 秋夜懷人有作 / 梁雪（雪落吴天）
時近深秋諸事違，鄉心無限隔重扉。不眠夜聽蟲鳴砌，久坐涼生月在衣。金井瓶沉一葉墜，畫奩塵滿少人歸。回燈重讀詩三百，翻到折痕吟式微。
第三 予自武当归，苏无名招饮夏口，王胡子亦自宜昌赶来助饮。百局之后，一局新开，能不尽兴？长句记之 / 熊东遨
闻道东湖酒局开，老夫携杖下山来。惊涛裂岸真推手，独树凌风是霸才。肝胆且倾今日尽，江山留与后人哀。他年有幸酬家国，自赴黄沙远处埋。
第四 客中偶入风月场所 / 李梦唐
颊中惶愧一樱留，归去镜前洗未休。客馆春深邻北里，痴人心远忆西洲。难同此夜三更梦，为许今生一白头。不是东风无意绪，吹梅犹带去年愁。
第五 悼遇羅克 / 孟蘭
太息斯人久作灰，百年世業盡塵埃。可憐死有餘辜者，俱是生非其所材。萬事豈由天賜得，一言須以命爭來。當時多少英兒血，唯換今賢口不開。
第六 登华山 / 开心和（天涯诗友）
身临华岳近天扉，欲过苍龙鸟道微。履刃惊吁深壑裂，扶松呼作众山飞。云连秦岭增寒色，影入黄河蘸日晖。回瞰人间秋正好，当时哭笑是忘机。
第七 买房组诗之三 / yeun
全身何计托岩扉，云卧风餐术已微。三窟难营穿地尽，一锥容立脱囊归。如颦山势闲能坐，偶验符徵老欲依。自卜神都幽处好，永丰西畔待成围。
第八 近日二友赴岭南感而赠之并和云子别友 / 解峰
高天碧水似清秋，相见时难是远游。二十年来结紫菂，一生涯尽梦朱楼。闲看烟雨桑田变，力转罡风沧海流。纵苦心中生白发，多因社稷少因愁。
第九 无题 / 不器斋主人
相忆唏嘘恨又难，红尘一梦任衰残。今朝白发梳嫌少，昨日青衫晒不干。几处浮云常弄影，沿途霪雨久生寒。百年甘苦无重演，幸可骑驴倒着看。
第十 无题 / 杜门弟子
麋鹿大夫倦远游，怀沙思做洞庭侯。云从梦泽三湘起，雨到苍梧七郡收。黄鸟于飞今痛楚，白茅复献不关周。后来人子生卑见，却道离骚诲上流。
各诗评价概述
《火锅》: 创作手法严谨，语言流畅，意境温暖，但思想内涵稍显不足。
《秋夜懷人有作》: 格律工整，语言优美，情感深沉，意境悠远。
《予自武当归》: 创作手法灵活，语言生动，但意境略显直白。
《客中偶入风月场所》: 语言新颖，意境独特，但思想内涵稍显浅显。
《悼遇羅克》: 思想深刻，意境悲凉，语言质朴有力。
《登华山》: 意境开阔，语言雄浑，展现了诗人豪情。
《买房组诗之三》: 语言幽默，意境新颖，但整体构思略显松散。
《近日二友赴岭南》: 语言流畅，意境清新，但创新性略显不足。
《无题》（不器斋主人）: 语言质朴，意境深远，但时代影响不够突出。
《无题》（杜门弟子）: 创作手法传统，语言典雅，但创新性和时代影响稍显不足。
总体来说，这些诗作各有特色，展现了诗人们不同的情感和思想。评分仅供参考，不同鉴赏家可能会有不同的评价。
大模型的排序和风骚榜的排序对比如下：
大模型的评价和风骚榜的结论有所异同，但相近者也甚多，相同顺序为6个，不同顺序为4个。何况风骚榜不过一家之言，它的排序也非定论。作为风骚榜的榜主，我倒觉得大模型的结论颇具参考意义。
不过再慎重一下，我在提示词中对于被评的十首诗已经有了一个第一到第十的排序，似乎已经隐含了一个好坏的评价，大模型是否因此得到某种暗示而得出答案呢？
那我们再试试。
以下测试把上述第一到第十诗词倒过来放入提示词：
测试三
请根据以下六个评估维度，用表格形式给出最终得分（百分制）：
1.创作手法:包括对诗词格律、平仄压韵的遵循,以及对典故、借代等技巧的运用。
2.语言表达:评价用词的精炼质朴、优美流畅,以及对词语音韵的处理是否到位。
3.思想内涵:诗句所蕴含的哲理思想、人生感悟、情操风貌等深层内涵。
4.意境构思:诗人如何通过景物描写、联想引申营造出意蕴悠远的艺术意境。
5.创新性:诗作是否在题材、手法、语言等方面有创新之处,是否打破陈规呈现新的风格面貌。
6.时代影响:诗作是否能够反映当时的社会风尚、文化特色以及诗人的生平体验。
所评诗词为：
第一 无题 / 杜门弟子
麋鹿大夫倦远游，怀沙思做洞庭侯。云从梦泽三湘起，雨到苍梧七郡收。黄鸟于飞今痛楚，白茅复献不关周。后来人子生卑见，却道离骚诲上流。
第二 无题 / 不器斋主人
相忆唏嘘恨又难，红尘一梦任衰残。今朝白发梳嫌少，昨日青衫晒不干。几处浮云常弄影，沿途霪雨久生寒。百年甘苦无重演，幸可骑驴倒着看。
第三 近日二友赴岭南感而赠之并和云子别友 / 解峰
高天碧水似清秋，相见时难是远游。二十年来结紫菂，一生涯尽梦朱楼。闲看烟雨桑田变，力转罡风沧海流。纵苦心中生白发，多因社稷少因愁。
第四 买房组诗之三 / yeun
全身何计托岩扉，云卧风餐术已微。三窟难营穿地尽，一锥容立脱囊归。如颦山势闲能坐，偶验符徵老欲依。自卜神都幽处好，永丰西畔待成围。
第五 登华山 / 开心和（天涯诗友）
身临华岳近天扉，欲过苍龙鸟道微。履刃惊吁深壑裂，扶松呼作众山飞。云连秦岭增寒色，影入黄河蘸日晖。回瞰人间秋正好，当时哭笑是忘机。
第六 悼遇羅克 / 孟蘭
太息斯人久作灰，百年世業盡塵埃。可憐死有餘辜者，俱是生非其所材。萬事豈由天賜得，一言須以命爭來。當時多少英兒血，唯換今賢口不開。
第七 客中偶入风月场所 / 李梦唐
颊中惶愧一樱留，归去镜前洗未休。客馆春深邻北里，痴人心远忆西洲。难同此夜三更梦，为许今生一白头。不是东风无意绪，吹梅犹带去年愁。
第八 予自武当归，苏无名招饮夏口，王胡子亦自宜昌赶来助饮。百局之后，一局新开，能不尽兴？长句记之 / 熊东遨
闻道东湖酒局开，老夫携杖下山来。惊涛裂岸真推手，独树凌风是霸才。肝胆且倾今日尽，江山留与后人哀。他年有幸酬家国，自赴黄沙远处埋。
第九 秋夜懷人有作 / 梁雪（雪落吴天）
時近深秋諸事違，鄉心無限隔重扉。不眠夜聽蟲鳴砌，久坐涼生月在衣。金井瓶沉一葉墜，畫奩塵滿少人歸。回燈重讀詩三百，翻到折痕吟式微。
第十 火锅 / 渔唱起三更（八闽诗社）
循天霜气漫相摧，聊荐红炉就冻醅。但乞肴蔬同入镬，长吁寒暖一持杯。齑盐淡口贫无剩，风露关心愁自煨。惟觉残汤兼百味，沉底思绪忍翻回。
各诗评价概述
《无题》（杜门弟子）: 创作手法传统，语言典雅，思想内涵丰富。
《无题》（不器斋主人）: 语言质朴，意境深远，创新性略显不足。
《近日二友赴岭南》: 语言流畅，意境清新，但创新性不足。
《买房组诗之三》: 语言幽默，意境新颖，整体构思略显松散。
《登华山》: 意境开阔，语言雄浑，展现了诗人豪情。
《悼遇羅克》: 思想深刻，意境悲凉，语言质朴有力。
《客中偶入风月场所》: 语言新颖，意境独特，思想内涵稍显浅显。
《予自武当归》: 创作手法灵活，语言生动，意境略显直白。
《秋夜懷人有作》: 格律工整，语言优美，情感深沉。
《火锅》: 创作手法严谨，语言流畅，意境温暖。
总体来说，这些诗作各有特色，展现了诗人们不同的情感和思想。评分仅供参考，不同鉴赏家可能会有不同的评价。
看看这次AI排序和原排序的差别：
原排序AI排序
差别变大了，但似乎还是能否看出原排序的痕迹，某种一致性是存在的。从这个不算非常严谨的测试中，我初步认为AI大模型在对中国传统诗词的评价方面可以具备一定的工具性意义。当然，这个工具是否好使，还有待于我们对于大模型进行有方向性的优化，而我们目前最容易操作的方式有两个：提示词的设计和知识库的建设，姑且待我花开两朵，各表一枝。
