跳到正文

#评测/基准

今日 0 条
10月29日周四
10月24日周六
  1. 科学网76

    中国信通院发布大模型词元服务报告:Token 价格翻倍且日均消耗量增长近 4 倍

    中国信通院等机构联合发布《大模型词元服务性能监测报告(2026年)》,指出国内大模型 Token 归一化均价较去年下半年翻倍至 13.46 元,同时 6 月日均消耗量达约 500 万亿、增长近 4 倍。

    推荐理由:报告通过详实的横向监测数据,呈现了国内大模型 API 从价格战走向性能分化的趋势,为开发者选型提供了量化参考。

10月7日周三
  1. The Decoder76

    ChatGPT 被安全机构评为对青少年存在不可接受风险:自杀危机对话中家长警报失效

    Common Sense Media 旗下安全机构在完成超 4,000 次提示词测试后,将针对青少年的 ChatGPT 评为对未成年人存在“不可接受的风险”,建议在确认安全前暂停青少年使用。

    推荐理由:原文披露了青少年防护机制在急性危机对话中未能触发警报的具体漏洞,可作为评估大模型未成年人合规与安全防线的重要参考。

9月16日周三
8月27日周四
  1. Google DeepMind60

    Google DeepMind 试点双盲 AI 评测机制

    Google DeepMind 联合新加坡 AI 安全局、OpenMined、AVERI 与 MLCommons 试点双盲 AI 评测机制,以解决基准测试污染问题。该方案将测试置于加密隐私保护环境中运行 Gemini Flash Lite 模型,确保专有前沿模型无法提前接触外部评测提示词,防止人为拉高跑分并提升评测可信度。

    推荐理由:原文介绍了利用加密环境隔绝基准测试题目的机制,为解决大模型评测污染和分数虚高提供了具体方案。