发布时间:2023-05-05 10:40 原文链接: “所想即所见”,解码大脑信号再现视觉图像

是否有可能仅根据大脑信号,就完全重建某人所看到的内容?瑞士洛桑联邦理工学院研究人员朝着这个方向迈出了重要的一步,他们引入了一种新算法构建的人工神经网络模型,能以令人印象深刻的准确度捕捉大脑动态。该研究发表在最新一期《自然》杂志上。

这种新颖的机器学习算法CEBRA植根于数学,可学习神经代码中的隐藏结构。研究人员利用新算法进行了演示。一只老鼠正在观看1960年代的黑白电影片段,其中一名男子跑向一辆打开后备箱的汽车;在另一个屏幕上,人们可看到由CEBRA计算出的电影重建画面,新构建的电影几乎与原版完全吻合,但有一些轻微的怪异扭曲。

CEBRA从原始神经数据中学到的信息可在解码训练后进行测试。团队已证明他们可从模型中解码老鼠在看电影时所看到的东西。但CEBRA不仅限于视觉皮层神经元,甚至大脑数据,它还可用来预测灵长类动物手臂的运动,并重建老鼠在竞技场上自由奔跑时的位置。

用于视频解码的数据由艾伦脑研所提供,大脑信号是通过插入小鼠大脑视觉皮层区域的电极探针,直接测量大脑活动而获得,这些探针被设计成使激活的神经元发出绿光。在训练期间,CEBRA学习将大脑活动映射到特定帧。在以视觉皮层中不到1%的神经元进行测试时,CEBRA表现良好。

CEBRA基于对比学习技术,这是一种学习如何将高维数据排列或嵌入到低维空间的技术。与其他算法相比,CEBRA在重建合成数据方面表现出色,这对于比较算法至关重要。它的优势还在于它能够跨模式组合数据,例如电影功能和大脑数据,并且它有助于限制细微差别,例如由数据收集方式带来的数据变化。


相关文章

植入物结合AI将大脑信号转为语音

荷兰拉德堡德大学和乌得勒支大学科学家成功将人类的大脑信号转化为人们能听得见的语音。借助植入物和人工智能解码来自大脑的信号,他们能够预测用户想说的话,准确率为92%至100%。研究人员希望这项技术能够帮......

“所想即所见”,解码大脑信号再现视觉图像

是否有可能仅根据大脑信号,就完全重建某人所看到的内容?瑞士洛桑联邦理工学院研究人员朝着这个方向迈出了重要的一步,他们引入了一种新算法构建的人工神经网络模型,能以令人印象深刻的准确度捕捉大脑动态。该研究......

“所想即所见”,解码大脑信号再现视觉图像

是否有可能仅根据大脑信号,就完全重建某人所看到的内容?瑞士洛桑联邦理工学院研究人员朝着这个方向迈出了重要的一步,他们引入了一种新算法构建的人工神经网络模型,能以令人印象深刻的准确度捕捉大脑动态。该研究......

“所想即所见”

是否有可能仅根据大脑信号,就完全重建某人所看到的内容?瑞士洛桑联邦理工学院研究人员朝着这个方向迈出了重要的一步,他们引入了一种新算法构建的人工神经网络模型,能以令人印象深刻的准确度捕捉大脑动态。该研究......

新设备可将大脑信号直接转换为语音

据美国每日科学网站近日报道,有史以来第一次,美国科学家研制出的一套新系统,借助语音合成器和人工智能,通过监控某人的大脑活动,将其想法直接转化成了可理解、可识别的语音。研究人员称,最新研究为那些言语能力......

大脑信号新解码技术能解答情绪变化

美国南加州大学和加州大学旧金山分校的工程师和医生团队,通过开发一种新的解码技术,发现可以从神经信号解码中,了解心情如何变化。新研究发表在最近一期《自然·生物技术》上。这朝着开创新的闭环疗法迈出了重要一......

大脑信号调控抗细菌感染免疫反应

2017年1月7日/生物谷BIOON/--人的大脑并不仅仅能够控制思维与生理活动。最近的研究发现,大脑还能够调控机体对细菌感染的反应。它通过促进一类叫做PCTR1蛋白的表达,从而能够帮助白细胞杀伤入侵......

美研究发现:“读脑”具有可行性

直接从脑电波中解码单词,这种设想似乎已经离我们不远。美国物理学家组织网、英国《每日电讯报》报道,在9月版的《神经工程杂志》上,美国犹他州立大学的研究人员描述了从大脑信号解码单词的可行性。他们在一名志愿......

美成功将大脑信号翻译成口语单词

一位癫痫症患者大脑的核磁共振成像图,图片显示两种电极的位置分布情况。一种电极是传统的脑皮层电图电极(黄色),用于定位癫痫发作的源头,从而帮助医生进行手术。红色的则是两组实验用微脑皮层电图电极,每组阵列......