跳到正文
原文
Nature· Benjamin Minixhofer·· 27 天前AI 评分51

研究提出将大语言模型低成本改造为字节级模型的字节化方法与架构

Retrofitting language models to operate over bytes

AI 导读

研究人员提出了一种名为字节化的模型改造方法,仅消耗不足1%的常规预训练算力即可将现有子词级大语言模型转换为直接处理字节的字节级模型。

来源:Nature · nature.com