Jev 以无 GPU 托管模型为语音神经假体重排序,性能匹配 7B 语言模型
AI 摘要语音神经假体解码尝试性言语后需用数十亿参数语言模型对候选句重排序,是唯一依赖 GPU 的环节。在 ALS 受试者 978 句留出测试集上,已发表解码器单独词错误率为 8.1%,Jev 重排序后达 7.5%,优于 OPT-6.7b 与 Qwen2.5-7B 的 7.8%;解码器权重重调后为 6.9% 对 7.2% 和 7.4%。
AI 摘要语音神经假体解码尝试性言语后需用数十亿参数语言模型对候选句重排序,是唯一依赖 GPU 的环节。在 ALS 受试者 978 句留出测试集上,已发表解码器单独词错误率为 8.1%,Jev 重排序后达 7.5%,优于 OPT-6.7b 与 Qwen2.5-7B 的 7.8%;解码器权重重调后为 6.9% 对 7.2% 和 7.4%。
AI 摘要研究利用配对听想 MEG 数据集,在训练阶段用对比式神经解码器将 MEG 表征与声学和上下文语言表征对齐,提升听想语音的跨受试者词语解码;推理阶段引入神经约束束搜索框架,融合神经证据与语言模型下一词概率。结果显示想象语音解码比听语音解码更受益于语言模型,其神经与语言证据的最佳平衡更偏向语言模型,相对纯神经解码的增益更大。
AI 摘要研究提出 SICMD 方法,融合 fMRI 与 MEG 实现受试者不变的跨模态感知语音解码,同时应对时空神经表征提取与跨受试者泛化两大挑战。在跨受试者解码任务中,其 Top-1、Top-10 和 Rankacc 较基线方法分别提升超过 10.6%、10.1% 和 1.7%,训练成本较多人及单人解码设置分别降低 88.8% 和 60.5%。
AI 摘要一项基于 EEG 的想象语音解码研究在严格受试者独立评估框架下比较了两种特征提取流程,频谱带功率流程的试次级平均准确率显著高于时域统计特征流程(49.03 ± 4.18% vs. 37.97 ± 3.79%)。研究采用受试者间交叉验证与试次级多数投票,配合随机森林分类器,前向特征选择显示少数频段即可承载大部分判别信息。
AI 摘要Neuralink 语音试验的第三位受试者、因 ALS 失去说话能力的 Terry Mandable,通过植入语音运动区的芯片将意图说话时的神经信号解码为文字和语音,在演示中向妻子说出“I love you”。
AI 推荐理由:ALS 受试者通过 Neuralink 语音解码说出完整句子,读者可了解该系统在语音运动区的实际表现与试验阶段。
AI 摘要Neuralink 实验性 VOICE 研究的一名受试者使用该公司的脑机接口,以合成语音的方式生成言语。该受试者患有 ALS。
AI 推荐理由:Neuralink 的 VOICE 研究中一名 ALS 受试者用脑机接口合成语音,读者可据此了解该试验在语音解码上的进展。
AI 摘要Neuralink 脑植入物帮助一名 ALS 患者恢复了声音,该患者因肌萎缩侧索硬化失去对肌肉和声带的控制。报道称这套思维转语音脑机接口实现了语音恢复。
AI 推荐理由:材料仅给出标题与一句导语,读者可据此了解 Neuralink 植入物在 ALS 患者语音解码上的应用方向。
AI 摘要一项 MEG 研究用前向选择算法寻找自发与意图言语解码的最优传感器子集,发现平均仅需 7-8 个传感器、最多不超过 24 个,即可达到与全头皮 200 多个传感器相当的解码性能。
AI 推荐理由:研究用前向选择算法筛选 MEG 传感器子集,给出可穿戴 MEG 语音脑机接口在传感器数量与采样率上的工程参考。
AI 摘要Neuralink 的 VOICE 临床试验让一名患球部起病型 ALS 的受试者 Terry 在植入 N1 植入物后重新说话,他只需想自己要说的内容即可。研究要求他先训练算法读取其模仿说话时的脑电活动,再读取其单纯思考说话内容时的信号,随后由手机或电脑将神经活动转为文字并朗读出来。
AI 推荐理由:报道梳理了 Neuralink VOICE 研究中 ALS 受试者通过 N1 植入物恢复言语的过程,可与已有语音解码研究对照。
AI 摘要Neuralink 于 9 月 18 日发布 VOICE 试验更新,受试者 Terry 借助其脑植入物训练一套思维转语音系统,先尽力模仿口型,之后只需想词就能听到以自己的声音读出。
AI 推荐理由:Neuralink 的 VOICE 试验把植入物解码的意图语音交给 Grok Voice 合成输出,读者可据此了解其语音解码链路的分工。
AI 摘要Neuralink 的脑植入物帮助一名言语障碍男子说出首批词语。报道提到,失去说话能力是 ALS 等神经系统疾病最具破坏性的后果之一。
AI 推荐理由:Neuralink 植入物帮助一名言语障碍者说出首批词语,可与现有语音解码研究对照其受试者与场景。
AI 摘要针对瘫痪或神经系统疾病患者因无法说话、但思维表达能力尚存的问题,科学家正在研发可将思维转为语音的脑植入物,并探索无线脑机接口技术的工作方式。
AI 摘要马斯克在 X 上回应 Neuralink 一项脑机接口演示,称最新进展是令人惊喜的成果。该演示涉及一名失去说话能力的临床试验受试者,系统记录脑活动并将意图语音转为可听输出,受试者借此向伴侣传达了一条个人信息。
AI 推荐理由:马斯克对 Neuralink 语音解码演示的公开反应,可与 UCSF 团队同期三名受试者的语音与手势解码研究对照阅读。
AI 摘要Neuralink 的 VOICE 研究正在检验其无线 N1 植入物能否把与预期语音相关的信号转成文字或可听语音。该器件使用置于脑内的微小电极线。报道称,随着全球植入式脑机接口竞赛加快,这项研究受到关注。
AI 推荐理由:材料只给出 Neuralink VOICE 研究的目标与 N1 植入物的电极形式,读者可据此了解其语音解码试验的定位。
AI 摘要研究团队用47名肌萎缩侧索硬化受试者的1065段解码数据和五个语言模型,考察脑机接口中AI代理的推理与控制问题。以重建的解码器置信度提示代理,在匹配覆盖率下未能将不忠实执行降到确定性门控以下,两个模型显著更差;最高22个百分点的表面安全增益来自更少行动,有时是无效工具调用而非显式弃权。
AI 推荐理由:研究用47名ALS受试者的1065段解码数据比较语言模型代理与确定性门控,为脑机接口解码不确定性的控制问题提供可迁移方法。
AI 摘要一项发表于 Nature Neuroscience 的研究用同一套植入式脑机接口同时解码语音与手势,电极阵列含 253 个电极,覆盖感觉运动皮层。
AI 推荐理由:两名瘫痪受试者用同一套253电极ECoG阵列同时解码语音与手势,可与以往单一模态的语音解码研究对照。
AI 摘要Paradromics 的 Connexus 脑机接口实现实时语音。
AI 摘要Paradromics 称其 Connexus 脑机接口的首位受试者已能用脑活动自主选词、回答开放式问题并实时沟通,她在与孙辈的实时通话中通过合成语音和文字说出第一句自主解码的句子“Okay, I have a lot to say”,公司称该句逐词解码无误。
AI 推荐理由:Connect-One 早期可行性研究的首位受试者已能自主选词并实时输出语音,读者可据此了解皮层表面语音解码的人体进展与后续六年随访安排。
AI 摘要Paradromics 发布消息称,其脑植入物帮助一名失能患者恢复说话,患者表示自己有很多话想说。
AI 摘要Paradromics 宣布 Connexus 脑机接口首位受试者在 Connect-One 早期可行性研究中实现实时语音与文字交流,该受试者为一名患有运动神经元疾病的密歇根州 60 多岁女性,已出现严重构音障碍。
AI 推荐理由:首位受试者用全植入皮层内系统实时说出自选语句并完成电话交流,可与已有语音解码研究对照。
AI 摘要UCSF Edward Chang 团队用植入运动皮层的 ECoG 电极条,在三名瘫痪受试者身上同时解码语音与上肢手势,由机器学习把脑信号转成控制全身虚拟化身的指令。研究还发现大脑在同时说话和动作时的活动方式与单独做其中一件事不同,团队据此训练解码器。研究者希望未来测试可完全植入的无线版本,用于长期使用。
AI 推荐理由:三名瘫痪受试者用同一套 ECoG 系统同时解码语音与上肢手势,可与只做单一任务的既有研究对照。
AI 摘要UCSF Edward Chang 团队在 3 名存在发声与肢体瘫痪的受试者运动皮层植入 ECoG 阵列,用解码器将同时进行的语音与手势意图转化为全身虚拟形象的动作,研究发表于 Nature Neuroscience。团队发现同步表达时的脑信号并非语音与手势信号的简单叠加,解码器若先用同步表达数据训练,解码效果更好。目前系统为有线连接,团队称将很快测试全植入式无线版本。
AI 推荐理由:UCSF 团队在 3 名瘫痪受试者上同步解码语音与手势,读者可据此了解多模态脑机接口相对单一模态的解码差异。
AI 摘要Paradromics 称其 Connexus 脑机接口的首位人体受试者已能用脑活动实时生成自己的语句、回答开放式问题并与家人通话,首次自由选择的解码句子是“Okay, I have a lot to say”,公司称该句逐词实时解码且无错误。
AI 推荐理由:首位受试者用植入式皮层表面阵列实时输出自选语句,可对照其他语音解码试验的植入方式与任务难度。
AI 摘要Paradromics 宣布其 Connexus 脑机接口实现实时语音。
AI 推荐理由:Paradromics 公布 Connexus 脑机接口实现实时语音,读者可关注其与现有语音解码方案在实时性上的差异。
AI 摘要UCSF Edward Chang 团队在 BRAVO 临床试验(NCT03698149)中,用单块高密度 ECoG 阵列记录三名严重瘫痪受试者的皮层活动,实现语音与上肢手势的并行解码,并驱动个性化全身虚拟形象实时输出。
AI 推荐理由:三名严重瘫痪受试者的 ECoG 数据表明,同时尝试说话与手势时解码器需混合训练才能跨情境泛化,为多效应器脑机接口的训练策略提供了可迁移做法。
AI 摘要9月11日下午,2026浦江创新论坛成果发布会集中发布7项脑机接口原创首发成果。临港实验室发布精细手动行为及神经活动数据集、新型生成式视觉解码算法、脑机专用数据共享平台“临枢”和侵入式脑机接口专项算法竞赛“临弈”。
AI 推荐理由:7项成果集中发布,读者可据此了解上海脑机接口在数据平台、中文语音解码与类脑芯片部署上的当前布局。
AI 摘要Cognixion 的非侵入式脑机接口 Axon-R 在 LEAP 2026 上获 WIRED Middle East 报道。该设备将脑机接口与 AR 眼镜集成于单一可穿戴头显,无需侵入性手术,可结合眼动、头部运动和肌肉活动等生物特征输入驱动抬头显示,也能仅凭思维控制。创始人兼 CEO Andreas Forsland 在报道中介绍了该技术及其面向的失去说话能力的用户群体。
AI 摘要Brain2Speech-Net 是一种单阶段神经到语音生成框架,跳过中间文本解码,通过可微分音素瓶颈和 deep-HMM 对齐机制将长时神经记录映射到 TTS 模型潜空间。在对比系统中,它是唯一在生成速度快于实时的情况下仍能产出可懂语音的系统。
AI 摘要2026 PNPL 竞赛基于扩展数据集 LibriBrain100 设置词分类任务,该数据集在原有单受试者约 50 小时 MEG 数据基础上新增 32 名受试者(每人约 40 分钟)及约 80 小时单受试者数据。竞赛设 Deep 与 Broad 两条赛道:前者追求单受试者大规模词分类的最优性能,后者聚焦跨受试者泛化,将受试者特定微调数据从约 40 分钟逐步压缩至约 20 分钟、约 10 分钟。
AI 摘要研究者提出开放词汇互信息(OVMI),一种信息论指标,用于衡量解码器相对于用户可能表达词汇参考分布所传达的信息量,从而把不同词汇表、记录方式和语音类型下测得的语音脑机接口能力放到同一通信尺度上比较。
AI 摘要BrainGate2 登记一项可行性研究,评估皮层内神经接口系统对失语症患者的安全性并验证其通过尝试说话在电脑屏幕上生成文字和可听合成语音的能力。研究由 Leigh R. Hochberg 负责,目标是获取初步器械安全信息并展示原理可行性。
AI 推荐理由:BrainGate2 新登记失语症可行性试验,关注皮层内接口能否让失语者通过尝试说话生成文字与语音。
AI 摘要总部位于日内瓦的 Ability Neurotech 上月在德国启动术中研究,在脑肿瘤手术中以 20 至 30 分钟的短时段记录患者神经信号,后续阶段将让最多五名清醒患者用该设备完成言语和运动任务。
AI 推荐理由:Ability Neurotech 的光学 ECoG 脑机接口已进入人体术中研究,读者可了解其无压缩传输与无电池设计思路。
AI 摘要美国多机构团队(末位作者 Flinker,通讯作者之一 Devinsky)利用颅内 ECoG 高分辨率记录和受控句子产出实验,发现编码词级信息与高阶语言信息的皮层网络呈混合空间组织,既广泛分布于传统语言区,又在经典语言区出现对语义和结构对比的局部敏感集中。
AI 推荐理由:研究用颅内 ECoG 记录句子产出过程,发现词级与高阶语言信息的编码网络大多不重叠,可供语言解码研究对照。
AI 摘要Paradromics 的脑机接口 Connexus 上月在美国密歇根由外科医生植入一名患有运动神经元病、已失去大部分说话能力的女性受试者脑内,该植入物通过 421 个微电极深入运动皮层 1.5 毫米读取单个神经元信号,信号传至其胸部收发器再无线传输到接收器,由 AI 转成屏幕上的文字。
AI 推荐理由:文章记录了 Paradromics 的 Connexus 植入手术与术后康复阶段,并借 CEO 之口讨论支付与商业化路径。
AI 摘要多机构团队提出一种基于 transformer 的解码器模型,在六名皮层内语音脑机接口受试者数据上联合训练。对每名受试者,无论性别、病因或尝试说话策略,多用户模型解码语音的准确率都高于单用户数据训练的模型,平均相对 WER 降低超过 50%。该多用户模型在留出用户少于 200 句数据上微调后,WER 可低于 7%。
AI 推荐理由:六名皮层内语音脑机接口受试者的数据被联合训练,读者可据此了解跨用户数据汇聚对解码准确率与部署速度的影响。
AI 摘要Duke University 的 G. B. Cogan 团队在八名接受清醒神经外科手术的患者上,用高密度 μECoG 阵列记录感觉运动皮层,通过 PCA 提取潜在动态并用 CCA 跨患者对齐,训练出跨患者语音解码模型。
AI 推荐理由:八名受试者的术中 μECoG 数据显示,跨患者对齐潜在动态后语音解码可超过个体模型,读者可据此比较跨患者与个体化训练路线。
AI 摘要Meta 的非侵入式脑机接口 Brain2Qwerty 实现 61% 准确率。该研究结果由 infoq.com 报道。
AI 摘要美国国立卫生研究院(NIH)发布消息称,一款脑机接口装置帮助一名男性恢复说话能力。
AI 摘要法国格勒诺布尔大学医院在ClinicalTrials.gov注册了一项评估慢性脑机接口用于闭锁综合征患者语音康复的可行性与疗效的试验。该试验针对运动障碍导致的闭锁综合征,背景提到法国ALIS报告约500名患者,自然语音平均每分钟150词,而非侵入式EEG方法认知负荷高、效率低,每分钟仅能拼出几个字母。试验拟采用侵入式脑机接口,通过直接解码感觉运动皮层神经元活动来预测说话意图。
AI 推荐理由:法国格勒诺布尔大学医院注册了一项针对闭锁综合征的慢性侵入式语音脑机接口可行性试验,可与已有的ECoG和Utah阵列语音解码研究对照。
AI 摘要Blackrock Neurotech 讲述 ALS 受试者 Casey Harrell 的故事:2023 年他在 UC Davis 主导的临床试验中接受手术。