“所想即所见”解码大脑信号再现视觉图像 焦点播报

采编:hyt15  来源:科技日报  发布时间:2023-05-04 10:43:24 


【资料图】

科技日报北京5月3日电(记者张梦然)是否有可能仅根据大脑信号,就完全重建某人所看到的内容?瑞士洛桑联邦理工学院研究人员朝着这个方向迈出了重要的一步,他们引入了一种新算法构建的人工神经网络模型,能以令人印象深刻的准确度捕捉大脑动态。该研究发表在最新一期《自然》杂志上。

这种新颖的机器学习算法——CEBRA植根于数学,可学习神经代码中的隐藏结构。研究人员利用新算法进行了演示。一只老鼠正在观看1960年代的黑白电影片段,其中一名男子跑向一辆打开后备箱的汽车;在另一个屏幕上,人们可看到由CEBRA计算出的电影重建画面,新构建的电影几乎与原版完全吻合,但有一些轻微的怪异扭曲。

CEBRA从原始神经数据中学到的信息可在解码训练后进行测试。团队已证明他们可从模型中解码老鼠在看电影时所看到的东西。但CEBRA不仅限于视觉皮层神经元,甚至大脑数据,它还可用来预测灵长类动物手臂的运动,并重建老鼠在竞技场上自由奔跑时的位置。

用于视频解码的数据由艾伦脑研所提供,大脑信号是通过插入小鼠大脑视觉皮层区域的电极探针,直接测量大脑活动而获得,这些探针被设计成使激活的神经元发出绿光。在训练期间,CEBRA学习将大脑活动映射到特定帧。在以视觉皮层中不到1%的神经元进行测试时,CEBRA表现良好。

CEBRA基于对比学习技术,这是一种学习如何将高维数据排列或嵌入到低维空间的技术。与其他算法相比,CEBRA在重建合成数据方面表现出色,这对于比较算法至关重要。它的优势还在于它能够跨模式组合数据,例如电影功能和大脑数据,并且它有助于限制细微差别,例如由数据收集方式带来的数据变化。

关键词:

关闭
振芯科技:4月28日融资买入2088.87万元,融资融券余额6.25亿元
“所想即所见”解码大脑信号再现视觉图像 焦点播报
6月热身赛程:国足12日、20日先后对阵缅甸、巴勒斯坦_世界速讯
每日简讯:影迷们20年的漫长等待,值吗?
“五一”假期山东200家旅游景区共接待游客1916.3万人次
全国铁路今天预计发送旅客1520万人次
每日短讯:“非遗”闽剧公益演出亮相“五一”假期 助力文旅经济
看点:广州黄埔区成立中小企业信用服务中心
焦点短讯!美盈森:4月28日融资买入116.92万元,融资融券余额1.38亿元
2023五一档票房15.19亿居影史第三 喜剧《人生路不熟》反超《长空之王》夺冠
5月4日上证指数开盘下跌0.51%,创业板指下跌0.36% 天天简讯
大广高速全程多少公里(大广高速全程路线图)
都是扫拖一体扫地机器人,究竟哪个品牌比较好?对比评测亲证
打击股市造谣者 监管部门有必要介入到“股市谣言第一案”中来_通讯
塞尔维亚小学枪击案致9人死亡,凶手为一名14岁7年级学生
环球关注:8号线二期,全线轨通
《银河护卫队3》上海点映:观众赞炫酷炸裂“火箭浣熊”引泪点 环球速讯
还是惯犯呢?
周永恒39岁生日遭妻子起诉离婚,曾因出轨家暴与前妻决裂-全球动态
锦州日报20230504
霉霉新恋情曝光,周末官宣第11任男友身份,分手一个月火速认爱-焦点速读
全球热推荐:天宜上佳董秘回复: 公司向特定对象发行限售股已于2023年4月26日上市流通,公司重视市值管理
MVP归来!恩比德膝部未佩戴护具 移动、场上动作如常-动态焦点
糖醋鱼的家常做法视频_糖醋鱼的家常做法 天天速讯
环球快报:露营热度再提升 商家两极分化 行业加速洗牌