当前位置: 首页 > news >正文

脑机接口新进展!只凭意念,操纵机器移动、拿取物体成为现实

e864435140184f5cdb2ac04052c49162.gif

撰文:吴婷婷
编审:寇建超
排版:李雪薇

在科幻电影《X 战警》中,Professor X 能以意念控制人类,每当你看到这一场景时,是不是特别羡慕不已、连做梦都想拥有这样的超能力呢?


fcec3212af36cb3d738b3f26816a476e.png

如今,也许机会来了——你可以先从用意念控制“机器人”开始。

近日,来自洛桑联邦理工学院(EPFL)、得克萨斯大学奥斯汀分校(UT)的科学家团队,就开发了一种可以仅借助人类大脑发出的电信号就能控制机器人的强化学习系统——无需任何语音控制或触控功能,使用者只需要简单地“想一想”,就可以操控机器人完成移动、拿取物体等任务。

据论文描述,这项基于脑机接口的研究,目前主要针对瘫痪患者,可以让机器人更加准确、快捷地辅助瘫痪患者的正常生活,以提高他们身体的灵活性。

相关研究论文以“Customizing skills for assistive robotic manipulators, an inverse reinforcement learning approach with error-related potentials”为题,已发表在 Nature 子刊 Communications Biology 上。

b04aa322803b4af38592105e8161b67a.png

780cb10b17bd0258b3fc99c77a306a31.png

意念控制的前提:规避障碍

多年来,科学家们致力于开发一种可以辅助患者控制身体的系统,以帮助瘫痪患者完成日常生活必需的活动。

在某种意义上,智能机器人的出现可以帮助瘫痪患者恢复一定的身体灵活性,因为他们可以操作机器人来代替自己完成任务。

然而,目前的辅助设备一部分仅限于通过摄像头等装置实现自动避障,控制权并非在瘫痪患者自己这边。另一方面,即使是瘫痪患者掌握避障选择权,也都是基于语音或操作控制面板来满足需求,普适性并不高。

为了解决这一问题,此次研究团队希望首先解决“机器人规避障碍”的问题。因为患者们的所有日常活动都会涉及这一点,如果没有一个好的避障系统,对患者来说,机器人就没有了辅助意义。

因此,研究人员从他们几年前开发出的机械臂着手,该机械臂可以来回移动,不断实时定位它面前的物体,并绕过移动路径上的障碍物。

b8ad483064f761173f4ffd20b9c5ed92.png

大脑电信号与逆向强化学习

论文通讯作者之一、EPFL 学习算法与系统实验室的负责人 Aude Billard 教授说:“在此次研究中,我们不仅对机器人进行了编程以避开障碍物,而且选择了一些其他更难的任务,例如在桌子上放一个装满水的杯子,然后要求机器人避开水杯、将目标物体拿到指定位置。”

03636f1dcf631978eb8aff18ab98f39f.png图 | 机械臂避障示意图。(a)机械臂原本的移动路径;(b)机械臂完成更难任务时的移动路径;(c、d)患者使用控制面板上下左右操纵机械臂

然而,这还远远不够。


因为起初,机器人会自动选择将物体移到较远的地方,从而清理出一条对某些障碍物来说较宽的路径。但问题在于,这条路径对其他大点的物体来说不够宽,而且有时移动的距离也不够远。

那么,能不能在患者的脑海与机器系统之间建立某种连接,来真正实现“意念控制”以达到更完美的避障效果呢?

要实现“意念控制”,首先需要设计出一种算法,该算法可以完全根据患者脑海中的想法来调整机器人的各种运动。于是,工程师们为患者戴上配有电极的头罩,该头罩可以对患者的大脑活动进行脑电图 (EEG) 扫描,一旦出现异常的电信号,就会对机器人的行动产生影响。

当机器人按照设定的 AI 程序进行避障时,患者所唯一需要做的就是看着机器人。如果机器人做出了不正确的动作,患者的大脑会通过一种清晰可辨的电信号发出“错误信息”的警告,就好像在对机器人说“No”。

一旦接收该信号,机器人就会停止当前动作。但实际上,它并不能确切地“理解”问题出在哪里。例如,自己当前究竟是离障碍物太近还是太远?

因此,研究团队还开发了一种基于逆向强化学习方法的算法,来帮助机器人去进行“推理”,以找到正确答案。

首先,错误信息会被输入到算法中,计算出患者想要什么以及机器人应当采取什么行动。这实际上是通过试错过程来完成的,也就是说,机器人会开始尝试不同的动作,看看哪个动作是正确的。这个过程并不会花费较多时间,机器人通常只需要尝试三到五次就能找出正确的反应并执行患者的愿望。

bfc76b3e5d94052e53ddf3b6d451a977.png

图 | (左)机器原本生成的避障轨迹,红色区域表示可能出错的路径;(右)经过患者大脑纠正后的避障路径

在实验中,研究人员以机械臂拾取、放置、避开物品等任务为例,并在受试者身上验证了该方法。

此外,用户还能够训练机器人控制器来调整其自动接近障碍物的方式,从而生成个性化的机器人活动轨迹。

c6888841b227f7f9586735efbf7566fc.png

未来的发展

不过,该技术也存在一定局限性,正如论文通讯作者之一、EPFL 脑机接口实验室的负责人 José del R. Millán 教授所说:“此次开发的机器人AI程序可以快速进行学习,但你必须在它犯错时用意念告诉它,只有这样,它才能迅速纠正当前的行为。”

研究团队也表示:“目前,我们面临的最大技术挑战之一就是开发出更加智能、准确的错误信号检测技术。”

但不可否认的是,此次研究已经部分实现了“直接依靠脑电波控制机器人”。实际上,仅仅在中国,平均每 1000 人中就有一位脊髓损伤患者,因此这项研究成果无疑为这些患者带来巨大希望,让他们不需要语音控制或触摸功能就能控制机械系统,在最大限度上回归正常生活。

此外,研究人员还表示,希望最终使用此套算法系统来控制轮椅。毕竟对于患者来说,轮椅就是他们的四肢,“尽管目前仍有许多工程困难需要克服,但是如果实现了意念控制轮椅,那才是真正意义上从禁锢的身体中解脱出来。”

参考资料:
https://www.nature.com/articles/s42003-021-02891-8
https://techxplore.com/news/2021-12-mind-controlled-robots-closer.html

04e2c744ed52d15186f7f529e6ee104c.png

推荐阅读

656cb33deba1beb8db49c3c33f8104c8.png

基于EEG的脑机接口:认知分析与控制应用 

35a78b648ed4df58506dc5e2838d3442.png

作者:[印]狄柏丽·班赛尔(Dipali Bansal)

拉什玛·马哈詹(Rashima Mahajan)

译者:施明辉

结合Emotiv脑电采集设备与MATLAB

基于眨眼诱发的EEG信号实现脑控应用

推荐语:脑机接口(BCI)技术在医疗康复、自动控制和情感识别等领域有着广阔的应用前景,为人们提供了一种与体外环境交互的新方式。在各类神经信号中,脑电(EEG)信号由于其易采集、低成本等优点,得到了广泛的研究和应用。

本书不仅涵盖BCI的技术原理,而且给出了一个采用眨眼诱发的EEG信号的完整实现示例。书中首先介绍EEG信号的获取方法以及基于眨眼的BCI框架,之后详细讲解从EEG信号中识别有意眨眼的方法,包括时域方法和频域方法。在此基础上开发脑控应用系统,将Emotiv脑电采集设备与MATLAB连接,实现EEG信号的获取与分析算法。其中,针对EEG信号分析,讨论了事件相关电位、脑地形图、EEG子频带功率、通道相干性等技术。

4b2a55fcd33e1b965dd7359cbbefd18d.png

代数大脑:揭秘智能背后的逻辑

b10bf33bbf345903aa5f189ac16b9c1f.png

作者:[美]加里·F. 马库斯(Gary F. Marcus)

译者:刘伟刘欣于栖洋等

DeepMind人手一本!

屡次对战深度学习三巨头,揭秘大脑黑盒到底是神经网络机器,还是加工符号的机器

推荐语:本书英文版出版至今已近20年,但关于大脑究竟如何工作的问题至今仍无答案,而符号主义(认为大脑是类似于计算机的加工符号的机器)与联结主义(认为大脑是并行运转的大型神经网络)之间的争论也从未停息。本书分析了联结主义模型和符号加工模型在计算方面的优势和劣势,关注不同联结主义模型之间的差异以及特定模型与符号加工的特定假设之间的关系,并围绕多层感知器展开讨论。书中的观点在今天依然频繁成为学术讨论的焦点,并为认知科学、人工智能、深度学习等领域的未来研究指明了可能的方向。

616ae73332c351652180c9631df6c3ca.png

2022华章科技年度新知发布

3f8b775d3213d89c799a53158064a1a1.png

ed144ce9cbbd992a0bfdb8e9c9639ef2.gif

cf4a4e852873bfd550d53c62ae941cf0.png

扫码关注【华章计算机】视频号

每天来听华章哥讲书

70747ba16530fdfae105561b48ae100e.gif

更多精彩回顾

书讯 | 1月书讯(下)| 2022年的第一本书

书讯 | 1月书讯(上)| 2022年的第一本书

资讯 | 重磅!达摩院发布2022十大科技趋势

书单 | 6本书,读懂2022年最火的边缘计算

干货 | Flink1.14.2发布,除了log4j漏洞你还需要关注什么?

收藏 | Docker冲顶技术热词,微服务应用热度不减,中国云原生开发者真实现状如何?

上新 | 【新书速递】金融领域可解释机器学习模型与实践

5e7d964f98f406197f8da961a144ee32.gif

2fd8061671ebbf1ec44a3b8c40e689b7.gif

点击阅读全文购买

相关文章:

  • 【第87期】程序员怎样上元宇宙的车?
  • 什么是贝叶斯定理?朴素贝叶斯有多“朴素”?终于有人讲明白了
  • 数据中台怎么选型?终于有人讲明白了
  • 一幅真实的产品世界全景图,产品小白向上突破必看!
  • 自主IT行业生态需要会造计算机的人才
  • AI正在模仿人类大脑!2021年10篇顶会论文:大脑也在「无监督」学习
  • 终于有人把“嵌入式人工智能”讲明白了
  • 数据分析的 5 种归纳方法
  • 四位RISC先驱获「工程学界诺贝尔奖」,图灵奖得主David Patterson、John Hennessy获奖...
  • 【第88期】这10本硬核技术书,带你读懂5G、物联网和边缘计算,玩转元宇宙
  • 抖音的推荐技术这么强,为什么还有人觉得推荐的一点都不准呢?
  • 【新书速递】如何高效学习存储系统?一本书全都讲明白
  • 学会这10个设计原则,离架构师又进了一步!!!
  • Electron开发者该如何提升自己的技能水平
  • 终于有人把ROS机器人操作系统讲明白了
  • 【译】JS基础算法脚本:字符串结尾
  • 《Javascript高级程序设计 (第三版)》第五章 引用类型
  • C++入门教程(10):for 语句
  • canvas实际项目操作,包含:线条,圆形,扇形,图片绘制,图片圆角遮罩,矩形,弧形文字...
  • Mac 鼠须管 Rime 输入法 安装五笔输入法 教程
  • Promise面试题,控制异步流程
  • Vue 动态创建 component
  • 创建一种深思熟虑的文化
  • 发布国内首个无服务器容器服务,运维效率从未如此高效
  • 简单易用的leetcode开发测试工具(npm)
  • 前端代码风格自动化系列(二)之Commitlint
  • 一道闭包题引发的思考
  • 东超科技获得千万级Pre-A轮融资,投资方为中科创星 ...
  • 国内开源镜像站点
  • 浅谈sql中的in与not in,exists与not exists的区别
  • ​DB-Engines 11月数据库排名:PostgreSQL坐稳同期涨幅榜冠军宝座
  • #{} 和 ${}区别
  • #传输# #传输数据判断#
  • #在 README.md 中生成项目目录结构
  • $ is not function   和JQUERY 命名 冲突的解说 Jquer问题 (
  • $.ajax()方法详解
  • (¥1011)-(一千零一拾一元整)输出
  • (01)ORB-SLAM2源码无死角解析-(56) 闭环线程→计算Sim3:理论推导(1)求解s,t
  • (2)STM32单片机上位机
  • (c语言)strcpy函数用法
  • (附源码)springboot猪场管理系统 毕业设计 160901
  • (机器学习-深度学习快速入门)第三章机器学习-第二节:机器学习模型之线性回归
  • (紀錄)[ASP.NET MVC][jQuery]-2 純手工打造屬於自己的 jQuery GridView (含完整程式碼下載)...
  • (理论篇)httpmoudle和httphandler一览
  • (转)大道至简,职场上做人做事做管理
  • (最完美)小米手机6X的Usb调试模式在哪里打开的流程
  • **Java有哪些悲观锁的实现_乐观锁、悲观锁、Redis分布式锁和Zookeeper分布式锁的实现以及流程原理...
  • ./configure,make,make install的作用(转)
  • .Net Core 中间件验签
  • .net Signalr 使用笔记
  • .NET WebClient 类下载部分文件会错误?可能是解压缩的锅
  • .Net 路由处理厉害了
  • .NET简谈互操作(五:基础知识之Dynamic平台调用)
  • .NET文档生成工具ADB使用图文教程
  • .net专家(张羿专栏)