资讯专栏INFORMATION COLUMN

奠定脑机接口基石,中国科学家借助深度学习设计新型“读脑术”

starsfun / 1010人阅读

摘要:来自中科院自动化所类脑智能研究中心的杜长德团队利用深度学习技术来处理数据,让解码变得更为简单精准,这种方法还原出的图像质量也优于以往的方法。

只扫描大脑就能较精确构建出你所看到的景象,这听起来像科幻小说,却也是中国研究团队的成果。

如何通过分析人脑扫描成像来重建画面,这是神经科学领域的热门话题,现有的做法是监视人脑视皮层的活动,但是,要解码相关的功能性磁共振成像(fMRI)并不容易。来自中科院自动化所类脑智能研究中心的杜长德团队利用深度学习技术来处理数据,让fMRI解码变得更为简单精准,这种方法还原出的图像质量也优于以往的方法。

图 | 不同的脑图重建技术比较:首行是原图,末行是的多视图生成式模型的运算结果

处理fMRI的关键在于把人脑中三维的体素的活动与画面中的二维像素对应起来。但是,fMRI扫描却很难避免噪声的干扰,每一个体素的活动都会受到相邻体素的影响,计算出较精确的结果往往也意味着高昂的代价。实际上,很多方法都无法克服这一点,因此重建的画面品质也大大降低。

而杜长德团队的做法是从几组数据开始着手:他们让被试者观看一些简单的图像,例如单个数字或字母,并采集被试者视皮层的fMRI扫描结果,每一组数据都包含扫描结果和原始图像。

实验小组总共分析了超过1800组扫描数据及其原始图像,并用90%的数据来进行训练,让神经网络学会理解扫描结果和原始图像之间的关系。接下来,他们用剩下10%的数据进行测试:把扫描结果输入到神经网络,让其重建原始图像。

而结果也非常有趣,总体来说,他们还原的图像正是原始图像的清晰再现。大多数情况下,这种基于多视图生成式模型的视觉信息编解码比其他技术要较精确得多。

为评估该模型,小组比较了该模型与其他重建技术的运算结果。他们使用标准的图片比较方法来考察重建图像与原始图像的近似程度。图像比较的结果也证实了这一点。实验小组认为,大量的实验比较证明,这种方法能够更准确地从fMRI扫描结果中重现视觉图像。

而该方法的较大优势就是神经网络学到了应该用哪些体素来重建图像,不用分析所有的扫描数据。

另外,神经网络还学会了体素和体素是如何关联的,这一点同样至关重要,因为体素之间的关联如果被不被识别,最终会被当成噪声被舍弃。这个新方法充分利用了体素的关联,将之与噪声区分开来。

这项研究不仅对计算神经科学意义重大,也是研发新一代脑机接口技术的基石。实验小组透露,他们的方法还可用于解码其他方面的脑数据(例如声音和动作任务),分析更复杂的场景以及移动的图像。

欢迎加入本站公开兴趣群

商业智能与数据分析群

兴趣范围包括各种让数据产生价值的办法,实际应用案例分享与讨论,分析工具,ETL工具,数据仓库,数据挖掘工具,报表系统等全方位知识

QQ群:81035754

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/4532.html

相关文章

  • 专访《硅谷百年史》作者:AI、基因编辑如何在未来10年重塑人类生命形态?

    摘要:皮埃罗指出,更神奇的是,基因编辑有可能重塑人类生育方式,让无性繁殖变成可能。皮埃罗认为,这项实验的意义非常重大。 《硅谷百年史》作者、硅谷人工智能研究院院长皮埃罗·斯加鲁菲(Piero Scaruffi) 在其著作《人类2.0》中提出,人类发展将进入2.0 时代,人类历史上几千年来的生、老、病、死大问题,已正式被纳入技术的解决范畴,接下来的科技革命将可能会重新定义人类。 showImg...

    KaltZK 评论0 收藏0
  • 中国数字产业迎来发展黄金期

    摘要:中国数字产业正在迎来发展黄金期,其最大特点是信息和通信技术和数字基础设施将被各行各业广泛应用,数字技术的创新将给所有产业带来进一步的繁荣,同时能够驱动数字经济和实体经济进一步增长。数字产业的繁荣是新时期经济发展的重要基石。习近平总书记在今年举行的全国网络安全和信息化工作会议上明确指出,要发展数字经济,加快推动数字产业化,这一表述不仅引起强烈共鸣,也预示着中国数字产业发展迎来重大机遇。中国数字...

    voyagelab 评论0 收藏0
  • 米格尔·尼科莱利斯:仅通过思考就能实现的人机交互

    摘要:图灵访谈作为媒体嘉宾,会议期间对重量级嘉宾米格尔尼科莱利斯和李杰进行了访谈。访谈嘉宾米格尔尼科莱利斯,美国杜克大学医学院神经生物学教授法国科学院院士巴西科学院院士畅销书脑机穿越作者年巴西世界杯机械战甲发明者。 本文仅用于学习和交流目的,不得用于商业目的。非商业转载请注明作译者、出处,并保留本文的原始链接:http://www.ituring.com.cn/art... 6月15日~...

    Pluser 评论0 收藏0
  • 七大数字经济重点产业!

    摘要:它以网络为基础平台为中枢数据为要素安全为保障,既是工业数字化网络化智能化转型的基础设施,也是互联网大数据人工智能与实体经济深度融合的应用模式,同时也是一种新业态新产业,将重塑企业形态供应链和产业链。 ...

    BicycleWarrior 评论0 收藏0

发表评论

0条评论

最新活动
阅读需要支付1元查看
<