arXiv cs.LG· Nam H. Le·· 2 小时前AI 评分55
arXiv论文从罗杰斯悖论视角解释模型崩溃机制
Who Pays for the Knowledge Models Copy? Model Collapse as Rogers' Paradox
AI 导读
arXiv 新论文提出将生成式模型的模型崩溃理解为文化演化中的罗杰斯悖论,指出过度依赖模型复制产出无法带来整体认知收益,且会导致罕见知识优先衰退。研究通过三组实验表明,当数据生产者转向询问模型而非自主探索时,新鲜数据供给将发生内生性萎缩;仅筛选看似合理文本的合流过滤器会加速模型崩溃,只有主动核实并引入外部新信息的行为才能打破该循环。
来源:arXiv cs.LG · arxiv.org