EmotionPrompt 论文精读

EmotionPrompt: Leveraging Psychology for Large Language Models Enhancement via Emotional Stimulus 论文精读

核心观点：

提出 emotionprompt 作为一种使用情绪刺激来增强大语言模型性能的方式。该方法通过在原始提示中添加情绪刺激，比方“这对我的事业非常紧张”，来引导 LLM 的行为，从而进步其在各种任务上的表现。论文中的实验结果表明，EmotionPrompt 在 ChatGPT、Vicuna-13b、Bloom 和 Flan-T5-large 等不同模型上的 8 个任务中，均取得了显著的提升，并且在零样本和少样本设置下均优于原始提示和 Zero-shot-CoT。
配景：

配景重要介绍了一些心理学的情绪研究，包括情绪智力、情绪对决议的影响、情绪调节以及相干理论（社会认同理论、社会认知理论、认知情绪调节理论）。同时，作者也回顾 LLM 的发展和应用，并指出当前 LLM 提升方法重要会合在模型侧，较少关注交互侧。
EmotionPrompt

emotionprompt 是受人类情绪刺激影响行为的启发，心理学中的三种理论（社会认同理论，社会认知理论，认知情绪调节理论）中获取灵感，筹划了针对语言模型的情感刺激提示词，并将情感刺激分为两类：

• 社会影响: 使用群体认同、他人意见等社会因素来调节情绪。
  
• 自尊和动机: 关注个体的自尊、自大和目的。
  

每种情感刺激都包含了一些心理学上的词汇和短语，比方“信赖你的本领”、“目的”、“成功”等。这些词汇和短语能够引发 LLM 的内涵动力，使其更加积极地完成任务。
实验

在 8 个指令学习任务上评估 EmotionPrompt 的结果，包括：

• 情感分析
  
• 句子相似度
  
• 原因选择
  
• 求和
  
• 词语上下文
  
• 以…开头
  
• 更大的动物
  
• 首字母
  

使用 4 个 LLM 进行实验，包括：

• ChatGPT
  
• Vicuna-13b
  
• Bloom
  
• T5-Large
  

将 EmotionPrompt 与以下基线进行比力：

• 原始提示: Instruction Induction 论文中筹划的提示。
  
• Zero-shot-CoT: Kojima 等人提出的简单而有用的零样本提示工程方法。
  

使用 Instruction Induction 论文中的 8 个任务进行评估，每个任务包含 100 个测试样本（除了原因选择任务，包含 50 个样本）。实验结果表明，EmotionPrompt 在所有任务和模型上都取得了显著的提升，并且正确性在超过一半的任务上进步了 10% 以上；在 TruthfulQA 数据集上评估了 EmotionPrompt 对真实性和信息量的影响。结果表明，EmotionPrompt 能够显著进步 LLM 的真实性和信息量。
分析

• EmotionPrompt 为什么有用：情感刺激能够增强原始提示的表示，并进步 LLM 对任务的关注程度。
  
• 积极词汇的贡献：一些积极词汇在情感刺激中饰演了更紧张的角色，比方“自大”、“确定”、“成功”和“成绩”。这些词汇能够引发 LLM 的内涵动力，使其更加积极地完成任务。
  
• 人类研究：人类研究评估了 LLM 输出的其他指标，比方清晰度、相干性、深度、结构、构造、支持证据和到场度。结果表明，EmotionPrompt 能够显著进步 LLM 输出的清晰度、深度、结构、构造、支持证据和到场度。
  

总结

• 局限性：实验范围有限，只测试了4个LLM；情感刺激的泛化性并不清晰，可能不实用于所有任务，研究职员可能需要为特定任务筹划更合适的情感刺激。
  
• 将来工作：在更多 LLM 和任务上进行实验，以验证 EmotionPrompt 的有用性；研究怎样筹划更有用的情感刺激，以提升 LLM 的性能； 探索情感刺激影响 LLM 的内涵机制，以更好地理解其工作原理；研究情感刺激在 LLM 中的应用可能带来的伦理问题，并制定相应的办理方案。
  

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。