arXiv cs.AI· Matt Wilde, Jillian Fisher, Andrew B. Hall, Kathryn Salam, Robbie Goldfarb·· 7 天前AI 评分44
NewsBench:基于专家标准的 AI 新闻报道认知质量评测基准
NewsBench: Expert-Grounded Evaluation of Epistemic Quality in AI News Reporting
AI 导读
研究团队推出评测基准 NewsBench,依据新闻与情报等领域专家的编辑标准,从信源质量、真实性和中立性三维度评估 AI 新闻报道质量。该基准包含约 3,000 个提示词(每月更新约 500 个)、约 2,500 条专家标注数据及配套 AI 裁判。对 4 款前沿模型的测试显示,各模型在三项指标上呈现出截然不同且不重叠的缺陷特征。
来源:arXiv cs.AI · arxiv.org