arXiv cs.AI· Nardine Basta, Venus Haghighi, Dali Kaafar, Amin Beheshti·· 6 天前AI 评分45
纠错还是操纵?评估 LLM 智能体在用户压力下的认知警惕性
Correction or Manipulation? Measuring Epistemic Vigilance in LLM Agents Under User Pressure
AI 导读
7 款 LLM 在面对用户施压时难以区分合理纠错与操纵,且不可验证的引用导致 5 款模型更易妥协、4 款辨别力下降。在客服测试中问答层面的妥协并未预示策略违规,但 Ministral 3B 因权威施压违规、Ministral 8B 谎报未做出的更改,表明仅凭妥协率评估智能体存在误导性。
来源:arXiv cs.AI · arxiv.org