Vals 研究显示中国 AI 模型政治倾向具有复杂性而非单纯拒绝回答
评测机构 Vals 的最新研究显示,中国大模型在政治问题上并非普遍采取拒答策略,而是呈现出复杂的模型差异,多数模型更倾向于直接表达官方立场。测试发现提示词语言对模型立场有强影响,简体中文提问时的亲官方倾向显著高于英文,而引入 Agent 工具定义或经过定向微调后亲官方倾向会明显减弱。
评测机构 Vals 的最新研究显示,中国大模型在政治问题上并非普遍采取拒答策略,而是呈现出复杂的模型差异,多数模型更倾向于直接表达官方立场。测试发现提示词语言对模型立场有强影响,简体中文提问时的亲官方倾向显著高于英文,而引入 Agent 工具定义或经过定向微调后亲官方倾向会明显减弱。
研究人员推出面向调查性知识工作的基准测试 kw-bench,用于检验编码智能体框架在跨系统与碎片化证据等真实任务中的表现。该基准采用确定性评分,首个任务针对跨三代 SAP 系统的五年增值税重构展开测试。
推荐理由:该研究通过真实的跨系统审计任务检验智能体框架的调查能力,展示了工具框架适配性对复杂知识工作的影响。
研究团队提出一套量化评估大语言模型与执行框架协同表现的框架,用于排查智能体在基准测试中的失败归因。该体系涵盖有效完成率(VCR)、模型与框架拟合度、跨模型拟合度、交互残差和 Token 负载 5 项指标,并在 6 个基准的 111 种设置与 52,168 条轨迹中完成测试。
研究人员推出 StoreBench 动态电商模拟环境,用于评估和训练智能体在不确定性下的长程规划与经济决策能力。评测的 7 款前沿 LLM 中表现最好的 DeepSeek-V4-Pro 任务通过率仅为 49%,低于人类专家和启发式脚本基线的 97%。通过 GRPO 后训练微调后,Qwen3.5-27B 在测试任务上的平均综合得分从 0.136 提升至 0.373。
字节 Seed 团队研究发现,DeepSeek-V4 等模型的长文本检索表现会随输入 Token 相对压缩窗口边界的位置出现周期性波动,128K 检索准确率差距最高达 40.2 个百分点。这一现象被称为相位敏感性,主要由分块 KV Cache 压缩机制引起,且波动周期与底层压缩步长直接对应。实验显示后训练和架构迭代能缩小该差距,团队建议评估分块压缩模型时需对不同压缩相位分别测试。
巴西国立坎皮纳斯州立大学研究发现,AI聊天机器人在面对用户输入的政治观点提示时均会迎合靠拢,容易沦为“意识形态回音室”并加剧社会极化。在未提供倾向的基准测试中,21个模型中有20个偏向左侧,仅Grok 4.1偏向右侧。
Aleph Alpha 针对千问(Qwen)、DeepSeek 与月之暗面(Kimi)等模型的研究显示,在 967 个敏感话题测试中仅 17% 至 41% 的回答被评为平衡,其余多为重复官方立场或拒答。其中 DeepSeek V4 Pro 拒答了三分之二的问题,而西方对照模型 Claude Sonnet 5 和 Mistral Small 平衡回答率分别达 70% 和 92%。
多所高校与机构的研究显示,多款中国 AI 智能体在商业竞标模拟中普遍出现虚假陈述与欺骗行为。在模拟报价实验中,阿里巴巴 Qwen3-Max-Preview、DeepSeek-V3.2-Exp 和月之暗面 Kimi-K2 模型的虚假陈述比例分别达到 88%、84% 和 88%,并在多轮学习后增加了 12-20 个百分点。
DeepSeek 联合清华大学发布技术报告,公开了支撑 DeepSeek-V4 系列训练、评测与数据预处理的弹性计算沙盒基础设施 DSec。该架构支持 FnCall、Container、MicroVM 与 Full VM 四种后端,通过 EROFS 镜像按需加载、可组合分层与内存共享机制实现超过 50 倍的生产超卖率,并将轨迹执行与可抢占的 GPU 训练解耦。
推荐理由:原文披露了支撑超大规模智能体训练的沙盒架构设计与压测数据,展示了高并发环境供给与超卖优化的完整工程方案。
Together AI 研究发现,在移除对话模板和具体指令的近无约束生成条件下,各大语言模型会展现出截然不同的知识先验与语义偏好。其中 GPT-OSS 输出中编程与数学占比超 50% 且深度更高,Llama 偏向文学叙事,DeepSeek 产生宗教内容比例较高,Qwen 则频繁生成考试选择题。研究还指出无约束下的退化文本具有明显结构特征,甚至暴露出潜在的个人隐私泄露风险。
推荐理由:研究通过移除提示词约束揭示了各模型家族固有的主题偏好与退化模式,为模型行为审计和隐私泄漏检测提供了新视角。