中 / EN
2026-10-26 00:00 论文发表 基础与方法 原文语言 EN

香港中文大学(深圳)等融合脑电信号与图像,基准问答准确率达65.67%

内容概述 香港中文大学(深圳)等合作团队提出OneEEG,利用专门脑电训练和任务感知特征对齐处理多任务脑电问答。标准19通道任务同时输入数值信号与波形图,非标准通道任务只输入图像。在OneEEG-Bench有限候选答案测试中,总体准确率为65.67%,宏平均为68.24%;基线GPT-5.5总体为50.39%。基线仅接收图像与文字,训练和输入条件不同,不能据此认定通用模型能力或临床诊断优劣。
推荐理由 研究将多类脑电任务整理进统一训练集和基准,同时明确通道兼容的输入方式。其价值在于让任务、输入与评估口径可检查,而不是把有限候选答案上的表现等同于开放式读懂脑活动。

脑机百科消息(bciwiki.com),香港中文大学(深圳)、哈尔滨工业大学(深圳)等合作团队于2026年10月26日在arXiv公开OneEEG,尝试让多模态语言模型处理多类脑电理解任务。团队配套构建OneEEG-Instruct训练数据和OneEEG-Bench基准,所测试的是从有限候选答案中作选择的闭集问答。

OneEEG同时建模脑电的数值表示与视觉表示,并使用团队整理的多任务脑电指令微调数据集OneEEG-Instruct进行训练。框架引入任务感知的投影器混合(MoP)机制,将不同任务类别的异构脑电特征对齐到大语言模型的嵌入空间,即模型用于表示和处理信息的内部空间。

团队还建立了OneEEG-Bench基准,用于评估现有多模态大语言模型及OneEEG在多任务脑电理解上的表现。实验显示,接受评估的现有模型解读脑电输入的能力有限;结合数值与视觉脑电表示以及任务感知对齐机制的OneEEG取得了更强表现。

消融实验与进一步分析考察了脑电视觉呈现方式、MoP变体、路由器行为及不同脑电任务中的特征分散情况。研究聚焦模型对脑电输入的理解与评测,这些结果不等同于已证实的临床诊断能力或脑机接口应用效果。

OneEEG在可映射到标准19通道的任务中同时使用数值脑电和波形图,在非标准通道任务中只使用图像。基准覆盖运动、状态、临床、事件、睡眠和警觉六类任务,并加入基础脑电属性问答;有受试者标识的数据按人划分训练与评估集。

全文报告,OneEEG在该闭集基准上的总体准确率为65.67%,七类指标的宏平均为68.24%;所比较基线中,GPT-5.5总体准确率为50.39%。OneEEG经过专门脑电训练,基线只接收波形图与文字问题,输入能力和训练条件并不完全相同,结果不能作为通用模型能力排名。

本文由 BCIwiki 根据公开信息撰写

关联信源 · 1
arxiv.org 2026-10-26
阅读原文 ↗
指正 修订记录 · 无 中 / EN
© 2026 BCIwiki.com 产业简报 主题索引 提交线索 订阅本站 修订记录 关于我们