跳到正文
热点事件历史事件

CLEAR报告揭示AI模型存在非英语“token税”

1 篇报道1 个报道来源4 天前更新

先了解这件事

AI 综述

研究机构 CLEAR 发布报告指出,AI 模型在处理非英语内容时消耗的 token 数量显著高于英语,形成了隐性的“token税”。数据显示,在互联网最流行的 20 种语言中,最昂贵语言消耗的 token 数量是最便宜语言的 1.5 到 5 倍;当样本范围扩大至 200 种语言时,这一差距最高可达 17 倍。报告强调,这一差异不仅推高了非英语地区的模型调用成本,还会造成更高的响应延迟,并进一步缩减模型的有效上下文窗口容量。

AI 根据报道生成 · 4 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月29日
  1. Solidot
    研究发现非英语提示词的 token 成本显著高于英语

    研究机构 CLEAR 的报告显示,AI 模型处理非英语内容所需的 token 数量显著高于英语,形成了隐性的 token 税。在互联网最流行的 20 种语言中,最昂贵语言消耗的 token 是最便宜语言的 1.5 到 5 倍,扩大至 200 种语言时差距最高可达 17 倍。这一差异不仅推高了非英语地区的调用成本,还会造成更高的响应延迟并缩减有效上下文窗口容量。

本事件热度走势

当前热度 3·可比范围峰值 10(10月30日 00:00)·近 24 小时可比范围变化 -50%

02.557.51010月30日00:0010月30日16:0010月31日07:0010月31日23:00

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。