TechCrunch · AI· Julie Bort·· 3 小时前精选AI 评分76
Anthropic 在招股书中警告其可能接近达成 AI 递归自我改进能力
Anthropic warns that it’s very close to RSI capability, aka self-building AI
AI 导读
Anthropic 在更新的 S-1A 招股书中警告,公司可能即将达到其负责任扩展政策所定义的递归自我改进(RSI)阈值。文件指出,内部使用 AI 系统加速研发可能导致模型能力跃升超出安全与对齐措施的同步跟进速度,但目前尚无现有模型突破该门槛。Anthropic 同时承诺将在可预见的未来保持人类在研发流程中的监督,避免由模型全自主构建下一代前沿系统。
推荐理由
Anthropic 在上市文件中披露了模型辅助研发带来的对齐失控风险,为读者评估前沿模型自我迭代的治理挑战提供了参考。
来源:TechCrunch · AI · techcrunch.com