ChatGPT可否充当情感专家?——调查其在情感与隐喻分析的潜力

作     者：张亚洲 王梦遥 戎璐 俞洋 赵东明 秦璟 ZHANG Yazhou;WANG Mengyao;RONG Lu;YU Yang;ZHAO Dongming;QIN Jing

作者机构：郑州轻工业大学软件学院郑州450002 香港理工大学护理学院中国香港999077 郑州轻工业大学人事处郑州450002 中国移动通信集团天津有限公司人工智能实验室天津3000201 

出 版 物：《北京大学学报（自然科学版）》 (Acta Scientiarum Naturalium Universitatis Pekinensis)

年 卷 期：2024年第60卷第1期

页      面：43-52页

核心收录：

学科分类：0401[教育学-教育学] 04[教育学] 

基　　金：国家自然科学基金青年基金(62006212) 中国博士后科学基金(2023M733907) 信息物理社会可信服务计算教育部重点实验室开放基金(CPSDSC202103) Project of Strategic Importance Grant of the Hong Kong Polytechnic University(1-ZE2Q)资助 

主　　题：ChatGPT 情感分析 幽默检测 隐喻识别 

摘      要：为了探索ChatGPT情感分析能力以及对主观性和隐喻性理解的潜力,将ChatGPT在5个情感、幽默与隐喻基准数据集上展开评估,通过与领域内最前沿的模型对比,讨论其在不同任务上的优势与局限。此外,还通过对比ChatGPT与人类在情感分析中的性能差别,发现ChatGPT在情感、幽默与隐喻任务上与人类结果分别相差9.52%,16.64%和6.69%。实验结果表明,尽管ChatGPT在对话生成方面获得最佳表现,但是其在情感理解方面仍具有改进的潜力。最后,通过改善提示模板,调查ChatGPT在情感理解场景下对提示模板的敏感性。