AIDC
← 返回全部动态
arXiv 自然语言处理AI 评分 68/10009月25日 12:00

礼貌却未对齐:基于人类语用规范评估大语言模型的礼貌度判断

该论文评估了大语言模型在社交语用学层面是否与人类的礼貌判断相符。研究人员采用包含连续评分和三分类标注的两个英语数据集,对七个主流模型进行了测试。结果显示,模型之间的一致性显著高于模型与人类之间的一致性。策略层面的分析表明,模型与人类判断的对齐主要依赖于显式的语言线索,而在涉及建立融洽关系等隐式语用策略上仍存在理解偏差。

推荐理由该研究系统揭示了大模型在社交语用与人类主观礼貌判断上的深层对齐差异,为语言模型的对齐评估提供了新视角。

原标题:Polite but Misaligned: Evaluating LLM Politeness Judgments Against Human Pragmatic Norms

阅读 arXiv 自然语言处理 原文 ↗