arXiv cs.AI· Wenbin Zhang, ShangZhan Li, Bingxiang He, Ye He, Yuxin Zhou, Muzhen Cai, Qi Shi, Wanxiang Che·· 15 天前AI 评分35
LexPilot：评测法律大模型在中国民事案件咨询中主动交互能力的基准
LexPilot: Benchmarking the Proactive Interaction Ability of Legal LLMs with Laypeople in Chinese Civil Case Consultation
AI 导读
研究人员推出基准 LexPilot，用于评估法律大模型在中国民事案件咨询中主动引导非专业用户补充案情及下游判决预测的能力。该基准基于 36 种常见案由的 432 份真实判决构建，包含经专家审核的完整与信息不全咨询记录及对应法院判决。实验表明现有 LLM 主动交互能力较弱，在信息不全时的下游诉求判决预测较完整信息设置平均下降 23.84%。
来源：arXiv cs.AI · arxiv.org