脑机接口联手自动驾驶:王宁黄金花让轮椅读懂大脑
中新网上海11月5日电 题:脑机接口“牵手”自动驾驶 这对夫妻让轮椅“读懂”大脑 中新网记者 肖玉笛 薛凌桥 11月4日,第九届中国国际进口博览会现场,坐在轮椅上的王宁头戴脑电采集设备,大脑发出“往前走”的指令后,轮椅便缓缓向前行驶;遇到障碍物时,轮椅会自动绕行;前方突然出现行人,则会停下来。 “我控制一部分,...
中新网上海11月5日电 题:脑机接口“牵手”自动驾驶 这对夫妻让轮椅“读懂”大脑
11月4日,第九届中国国际进口博览会现场,王宁坐在轮椅上,头上戴着脑电采集设备。大脑发出“往前走”的指令后,轮椅缓缓向前行驶;碰到障碍物,它会自动绕行;前方突然出现行人,它则停下来。
王宁管这叫“共享控制”。“我控制一部分,它也帮我决定一部分。”
王宁网名“肥牛”,妻子黄金花叫“香菇”。这台脑控轮椅由“香菇肥牛”共同研发,是他们带到本届进博会现场展示的成果。轮椅把脑机接口和自动驾驶技术结合在一起,使用者表达行动意图,系统结合周围环境辅助判断,既能自主操控,也提高了出行安全性。
“我只需要想去哪儿,具体的操作细节交给它。”王宁说。
从生活难题开始的技术探索
王宁的技术探索,始于一场突如其来的疾病。
2020年,就在婚礼答谢宴的前几天,王宁猛地倒在地上,送医检查后才发现脊髓里长了肿瘤。手术做了30多个小时,术后他落下瘫痪,有段时间连日常起居都得靠别人照顾。那阵子夫妻俩创业刚失败,身上还压着一大笔债。这场变故一来,两个人的生活走向彻底变了。
“那时候只有念头能动。”王宁说。身体受限后,他开始思考,怎样才能重新掌握生活。
王宁的改造是从3D打印建模入手的,先给自己做辅助设备。之后他接触到外骨骼一类的产品,可标准化的东西很难完全对上个人的需要。他便动手改程序、焊电路板,碰上现成电路板达不到要求,干脆自己重新设计。
今年4月,王宁和黄金花做出了头戴式的脑机接口,考虑到一直通过思考输出操作指令太费精力,他们又把轮椅做成了一个“机器人”。
AI成为跨界开发的“帮手”
王宁和黄金花都是艺术专业出身,跨入硬件研发,需要补上的知识很多。AI的出现,为他们提供了新的辅助工具。
在王宁的描述里,两人的研发过程是“背后站着一堆AI去帮我们实现”。编程、算法这些难题,AI能替他分担;但点子从哪来、要做成什么样,还是源自真实生活。
硬件平台这一头也不能轻视。这回亮相的自动驾驶轮椅,用的是基于高通跃龙QCS8550芯片的开发板犀牛派X1。据王宁介绍,该平台把多种常用接口都集成好了,深度相机之类的设备可以直接接上,芯片选型、画电路板、焊元件这些基础活儿不用他再从头干,精力便能更多投到软件开发和算法优化上。
脑机接口跟智能手机、智能体怎么结合,王宁也在琢磨。他设想,将来使用者可以看自己的状态和所处场景,借脑机接口把需求表达出来,剩下在手机上的一串操作交给AI去做。像点外卖、安排日程这些原本要点好几次、操作挺麻烦的事,或许用更简单的意图表达就能办成。
“以前用脑机接口控制手机,步骤非常复杂。”王宁说,“如果有AI接入,就可以减少操作过程。”
从个人需求走向更多人的生活
在这段研发经历中,妻子黄金花始终是重要的同行者。
王宁记得,刚瘫痪那会儿,他连翻个身都要人帮,妻子得按嘱咐隔一阵给他做一次轴线翻身。黄金花说,自己也背地里掉过眼泪。可丈夫想试的新点子,她一直支持。
“他本来就是这样的人。”黄金花说。在她眼里,王宁的坚韧不是身体出事后才长出来的,他向来探索欲强、说干就干。有些想法在旁人看来不好实现,她也乐意陪着他做实验、一块儿想办法。
王宁形容妻子为“核能级别乐观的人”。AI虽然提供了许多知识辅助,但创意上还要依靠黄金花。
眼下,这套脑控轮椅已经能在王宁的日常出行中帮上忙,但要成为成熟产品,还有不少活要干。两人打算让系统以后能适配各种电动轮椅,价格最终压到5万元以内。
来本届进博会参加相关展示,夫妻俩也借此接触到更多企业、技术人员和有意向的合作方。早前王宁在自媒体上记录研发进展,引来不少有相似需求的人关注。他由此觉得,自己一个人的技术摸索,说不定能对上更广的社会需要。
王宁说:“我最开始做的时候,没有想过推广给其他人。后来发现,原来需要它的人不止我一个。”