2026年9月16日，神经科学顶刊《Nature Neuroscience》（中科院1区Top/Q1，IF=20.3）在线发表了加州大学旧金山分校（UCSF）神经外科等团队的研究成果。研究题为"Simultaneous speech and gesture decoding for multimodal communication in paralysis"，依托 BRAVO 临床试验（NCT03698149，I期单中心早期可行性）框架，首次在严重瘫痪患者中实现了"试图说话+上半身手势"的同步解码，并将两路输出并行驱动个性化全身虚拟化身（avatar）。这一进展把脑机接口（BCI）的研究范式从"单模态输出"推进到"多效应器自然交流"的概念验证阶段。
从工程架构看，该研究采用单块253通道、3mm间距、1mm记录触点的硬膜下高密度皮层脑电（ECoG）阵列，覆盖左半球感觉运动皮层。系统以30 kHz采集原始信号，提取70–150Hz高伽玛带（HGA）与1–100Hz低频信号，在居家环境下通过实时系统完成解码。三名受试者——Bravo-1r（36岁，脑桥卒中后痉挛性四肢瘫/构音障碍）、Bravo-3（脑桥卒中后四肢瘫，后退出）、Bravo-6（60岁，肌萎缩侧索硬化ALS，构音障碍合并上肢精细运动受损）——均先完成多效应器神经地图构建。其中 Bravo-1r与 Bravo-6进入实时语音+手势并行解码及虚拟化身交互阶段，首次以受试者的"尝试言语+尝试手势"意图同步驱动全身虚拟人表达。
研究揭示了两项对后续系统设计具有直接约束意义的结论。其一，单块ECoG在感觉运动皮层呈现"粗略躯体拓扑+局部重叠"的组织结构：言语相关活动偏腹侧中央前回，手势/上肢活动偏背侧，但部分电极在言语与手势下均被调制，说明单一电极即可承载跨模态信息。其二，更为关键的是"孤立训练不等于同时通用"：仅以"只说话/只做手势"数据训练的解码器，在"说话+手势同时发生"时误触发与漏检显著上升；只有将孤立试次与同步试次混合训练，并把另一模态试次标记为rest进行跨模态训练后，系统才能稳定工作。这一机制性发现为多效应器BCI的模型训练范式提供了数据层面的依据。
从行业视角看，该研究的价值不仅在于单项技术指标，更在于对BCI交流范式的结构性重构。既往脑机接口多聚焦于言语或手势的单独解码，而人类自然交流本质上是言语、表情、肢体动作并行的多通道过程。本研究首次用一枚植入装置同时打通言语与手势两条输出通路，使解码系统更接近真实交流的"多通道同步"特性。NIH通稿指出，该研究得到美国国立卫生研究院（NIH）资助，是首次在单一装置上实现言语与上肢手势的同时解码，被评价为向"以更自然的交互恢复瘫痪患者沟通能力"迈出的关键一步。
对照当前产业进程，该成果正处于脑机接口从实验室向临床与产业化跃迁的关键窗口。国内方面，"十五五"规划纲要已明确提出推动脑机接口成为新的经济增长点，2026年《政府工作报告》首次写入脑机接口；2026年3月，博睿康医疗科技（上海）有限公司获全球首张侵入式脑机接口第三类医疗器械注册证，复旦大学附属华山医院随即开出全球首张侵入式脑机接口临床处方。国际方面，Neuralink、Synchron、Paradromics 等企业正围绕长期植入、自由表达、真实生活场景落地等维度展开竞争。在此背景下，UCSF 团队的研究将多模态交流从理论构想推向临床可行性验证，为侵入式BCI的"自由表达"能力提供了关键技术注脚，有望加速该赛道从"运动代偿"向"自然交流重建"的方向演进。
研究团队指出，当前系统仍为有线架构，植入传感器需通过线缆连接外部处理单元。团队下一步计划测试全植入式、无线版本的装置，以改善长期应用前景。随着解码效率提升与系统小型化推进，单枚皮层植入装置支持多效应器控制的路径正在被逐步验证，脑机接口技术向帮助瘫痪患者实现更自然、更完整的交流这一目标持续迈进。
·
关于我们
浙大科技园启真脑机智能产业化基地是在浙大控股集团领导下，由浙江大学科技园发展有限公司与杭州未来科技城管委会共建，围绕脑机智能产业主体，辐射脑机+生命健康、脑机+智能制造、脑机+新一代信息技术、脑机+新材料等领域的专业化特色产业基地，由杭州启真未来科技发展有限公司负责全面运营。
基地依托浙江大学在脑机智能方面的学科优势，以脑机智能作为核心科技支撑，贯彻浙江大学国家大学科技园“有组织科技成果转化、有靶向科技企业孵化、有体系未来产业培育”的服务体系，致力于打造脑机智能领域具备成果显示度、区域影响力的产业化高地。
推荐阅读
……
联系我们
