法国神经技术公司BIOSerenity利用法国最强大的超级计算机Jean Zay,在三个月内开展了一系列大规模脑电图(EEG)人工智能训练实验。团队训练了一个拥有3亿参数的模型,使用了11万小时的EEG数据,运行在64个GPU上。此外,他们还完整训练了Mercury和Neptune两个模型家族,每个家族有三种规模,参数从约1300万到1亿不等,数据量从约5000小时到4万小时。结果显示,Neptune模型随规模增大而性能提升,但Mercury模型却出现相反趋势,最小版本表现最佳。这些发现表明,脑信号AI的缩放规律与语言模型不同,相关结果尚未经过同行评审。