脑机接口世界级突破,华山医院与脑虎科技实现意念合成汉语、人脑控制机械手“比心”
IT之家 1 月 2 日消息,据上海脑虎科技今日消息,脑虎科技与复旦大学附属华山医院神经外科密切合作,并在天桥脑科学研究院等的支持下,取得了人体临床试验突破性进展。
基于全自主研发的 256 导高通量植入式柔性脑机接口,先后开展高精度实时运动解码和语言解码临床试验研究,成功实现了“脑控”智能设备和“意念对话”。
脑虎科技表示,得益于高通量、高质量、跨脑区大规模脑电数据高效采集和实时分析,术中几分钟即可精准定位相关脑功能区,手术后两天即可开展运动、语言解码试验,两周内即可实现“脑控”智能设备和“意念对话”。
“这一突破性进展不仅涵盖了实时运动解码,更在实时汉语解码方面取得了前所未有的突破,标志着中国在脑机接口领域达到了世界领先水平。脑虎科技也因此成为全球唯一同时实现实时运动解码和实时汉语解码的侵入式脑机接口企业。”
2024 年 8 月,脑虎科技联合华山医院神经外科毛颖 / 陈亮教授团队顺利完成意念合成运动临床试验。受试者为 21 岁运动区占位的癫痫患者,通过手术植入 256 导高通量柔性脑机接口监测病灶并保护运动相关的重要脑功能区。
项目团队对其脑电信号的 High Gamma 频段进行脑电特征提取和模型训练,利用 LSTM(IT之家注:长短期记忆)神经网络模型进行连续时间解码,整体系统延迟小于 60 ms。受试者无需动手操作,术后两天内便可实现“脑控”玩乒乓球和贪吃蛇游戏。
经过两周的训练,结合脑虎科技自主开发的脑机操作系统 XessOS,受试者可以熟练使用微信、邮箱、淘宝、小红书、今日头条等常用 App,以及实现智能家居和智能轮椅的“脑控”,大大满足了运动障碍患者日常生活所需的基本行动能力。
汉语是一种以单音节为主的声调语言和图形语言,不同于英语等字母语言,其产生过程中的信息转换涉及更多脑区,需要研发针对汉语特征的神经编解码机制和信息处理手段。2024 年 12 月,脑虎科技联合华山医院神经外科吴劲松教授团队开展国内首例高通量植入式柔性脑机接口实时合成汉语言临床试验。项目团队在语言区占位肿瘤癫痫患者上进行了柔性脑机接口植入手术,通过植入 256 导高通量脑机接口,帮助其定位病灶并保护语言相关的重要脑功能区。
病人术后恢复良好,五天后即可实现 142 个常用汉语音节下 71% 的解码准确率,并且单字解码时延小于 100 ms,是目前国内实时汉语言解码的最高水平。
基于实时汉语解码,受试者不仅实现了意念实时合成汉语、驱动数字分身以及对话 AI 大模型等高级功能,还能将人的脑电解码成语言进而转化成指令实时操控灵巧手实现人机交互。
值得一提的是,新年来临之际,受试者还通过意念合成语言指令操作灵巧手,在脑海中想出“新年快乐”这四个字,就被电脑成功解码并发出指令操纵机械手做出比心的动作,传送了世界上第一段由意念完成的新年祝福。
广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家所有文章均包含本声明。