arXiv cs.LG· Shahryar G. Namdari, Francesco Iacomi, Riccardo Barbieri, Luca Mainardi·· 18 天前AI 评分34
EEG 与文本的语义对齐：用于解码想象语音的对比学习框架
Semantic Alignment of EEG and Text: A Contrastive Learning Framework for Decoding Imagined Speech
AI 导读
研究人员提出一种多模态对比学习框架，将 EEG 脑电信号与冻结的预训练文本编码器嵌入空间对齐，以解码想象语音。该方法在包含 5 名受试者的 Chisco 数据集上覆盖 39 个意图类别，取得了与任务优化的闭集分类器相当的解码表现。此外，最大 EEG-文本余弦相似度（MaxCosine）可作为解码可靠性指标筛选高准确率样本，评估阶段的 5 个语义维度平均一致性均超过 50% 随机基准。
来源：arXiv cs.LG · arxiv.org