|
原标题:梦幻能够刻录了?AI读取大脑重现你所见
基于大脑扫描的人工智能重建的图象(上行)与钻研参预者实际看到的图象。图片来源:CREATIVE COMMONS
人类眼中所见如何转化为脑中图象,这是神经迷信家始终致力破解的问题。跟着钻研的不停深化,如古人工智能(AI)在模仿上述图象转化进程方面表示得愈来愈好。
近日,在日本钻研团队发展的一项新钻研中,AI能够经过读取大脑扫描图象,重建与人们看到的实在现象相近的图象。钻研人员表现,跟着该技术的开展,无望将其运用于多种场景,好比探究各种植物如何感知世界,乃至记载人类梦幻、帮忙瘫痪者与别人交流。相干钻研预印本已于去年颁发,并将在近期举办的计算机视觉国内大会上正式发布。
事实上,许多试验室都在尝试经过AI读取大脑扫描图象,偏重建受试者近期看到的人脸、景色图象。而这项新钻研初次将“不乱分散”这一模型胜利运用于上述图象重建进程。
“不乱分散”由德国钻研人员开发,于2022年地下公布,与其余文本到图象的AI“生成”模型相似,都是在承受与文本形容相干的数十亿张图象训练后,从文本提醒中生成新图象。
在这项新钻研中,钻研团队为“不乱分散”减少了额定训练,行将对于数千张照片的额定文本形容,与大脑扫描钻研参预者视察这些照片时的大脑模式分割起来。
与以前使用基于大数据训练AI算法破译大脑扫描后果不同,“不乱分散”可以从较少的训练中获取更多信息。
未参预该钻研的美国普林斯顿大学认知神经迷信家Ariel Goldstein表现,这是一种结合文本和视觉信息来“破译”大脑的新办法。
发展这项新钻研的大阪大学零碎神经迷信家Yu Takagi引见,功用性磁共振成像(f MRI)经过扫描检测大脑流动区域血流变动,记载流动峰值。f MRI记载了大脑中与图象感知相干的不同区域,如枕叶(担任记载规划和透视信息)和颞叶(担任记载图象内容)的流动信息,而AI模型则将上述流动值转换为图象。这就是新钻研重建图象的原理。
钻研人员使用明尼苏达大学提供的在线数据集对“不乱分散”进行了额定训练。该数据集包罗4名参预者观看10000张照片时的脑部扫描后果,其中一部份用于模型的额定训练,还有一部份用于后续测试。
Takagi表现,新办法比之前的办法效力更高,能够用更小的数据集对模型进行训练。
钻研人员发现,大脑流动扫描提供了足够的信息,以从新创立人们看到图象的规划和视角。然而,该算法很难让真正的物体纤毫毕现,例如钟楼重建后的图象是笼统的图形。
解决上述问题的办法之一是使用更大范围的数据集进行训练以预测图象的更多细节。但目前f MRI数据集无限,因而钻研人员利用f MRI数据集中照片附带的图片阐明来规避这个问题。
例如,假如其中一张训练照片包孕钟楼,那末扫描中的大脑流动模式将与该物体间接关联。这象征着,假如钻研参预者在测试阶段再次展现了相反的大脑模式,零碎会将相应症结词输出“不乱分散”的文本-图象生成器中生成钟楼,并根据大脑模式所唆使的规划和透视图,将其归入重建的图象中,使其更接近实在图象。
但是,AI零碎只在4人规模内进行了测试,假如将其扩展到其余人的大脑扫描中,则需求进行再培训。因此,这项技术间隔遍及还有一段路要走。
【来源:磅礴旧事】 |
|