英国论坛
当人注视一片绿叶时,大脑里显现的画面是甚么样呢?彻底相反的树叶,形状类似的绿方片,又或者是风牛马不相及的葱绿毛毛虫?咱们无奈敲开他人的大脑,很难知道他们脑海里的画面和理想里的是不是同样。想要做到这一点,似乎只要神叨叨的读心术能够办到。
但去年底,日本迷信家宣称他们能够经过人们的大脑流动,画到他们头脑里的画面。哎,这不就是理想版的摄魂取念吗?这两位迷信家名叫Yu Takagi和Shinji Nishimoto,他们是大阪大学前沿生物迷信钻研院的传授。2022年十二月,两人颁发了一篇论文,名为《利用潜伏分散模型在人脑流动根底上重建高分辨率图象》。
他们的钻研进程十分繁杂,这里大略讲一讲:两位迷信家招募了一群意愿者,让他们每人看一万张天然景色图(不是一次性看完)。看图的时分,意愿者躺在核磁共振扫描仪里,这个大脑摄像时机记载下一切的大脑流动。
迷信家失掉脑内流动数据后,按照大脑不同的活泼部位,分为两部份,一部份是高级视觉皮层信号,另外一部份是初级视觉皮层信号。这些信号会化为简略线性模型里的小点点,但想画出能看懂的图来,只靠它们是不行的。迷信家们会用到抢手的潜伏分散模型Stable Diffusion。这个AI咱们以前提到过,只需求输出一段文字,它就可以自动发生合乎形容的丹青。
钻研中使用的Stable Diffusion由三构造组成,分别是图象编码器、图象解码器和文本编码器。迷信家把高级视觉皮层信号映照到图象编码器上,接着将它解码,获取一张张320*320的小图,它们被称为Z;同时,迷信家把初级视觉皮层信号映照到文本编码器上,再将它解码,获取相干文本C。最初,迷信家把Z和C结合起来,一同输出给零碎,生成图象Xzc。
后果发现,图象Xzc和意愿者看到的实际图象很接近,他们大脑里发生的画面差未几就是这模样。
(上排为实际图象,下排为大脑流动转换出的图象)假如只看Z重构出的画面,会发现色彩很类似,但内容十分笼统;仅用C重构画面,货色是对的,但形状基本不像。只要二者结合,成果才特别好。
视察不同意愿者头脑里显现的图,会发现画面内容根本不乱,只存在纤细差别。两位迷信家解释,之所以有细节上的差异,是由于意愿者们的教训以及数据品质不同,并不是试验进程有误。
“在咱们这项钻研以前,尚无哪一个钻研人员尝试用分散模型来重构视觉图象。” 他们很是冲动地告知媒体。“咱们的这项试验时第一个从生物学角度对模型进行定量解释。”这篇论文发到推特上后,人们又冲动又惧怕,大呼“AI曾经能读取人心了”。
“很不错!何时我能把它用在我的猫身上?跨物种的交流很首要!”
“咱们能够经过它,重构咱们的梦幻吗?”
“或许,它能够在法庭上用来取证呢?假定说,我是一同案件的嫌疑人,警察能不克不及把我送去做核磁共振,而后问我一些不该该知道的问题以证实我无罪?”
“我真的很耽心AI的读心才能,它能够让当权者变得更弱小,有力者变得更脆弱。固然,往好里想,或许老黎民能读懂政客的心,公民诉讼人能读警察的心……虽然,我疑心事件并非这样的走向。”
眼看网友开始滑坡,两位迷信家表现,别冲动,这个技术离读心术还有亿点点间隔。“这基本就不克不及算作读心术,由于该技术找到的是感知内容和大脑流动之间的瓜葛。这不是传统意义身上的‘读心’。”
并且,就算真的要读某人的心,总得把他绑到核磁共振扫描仪上才行。除非是被迫的,这很难做到。迷信家也感到有点纳闷,怎么大家像发现新大陆似的。明明从几年前开始,借助大脑信号来生成图象的试验曾经有得多起了。大阪大学的这项试验,最大的不同在于他们没有训练或调剂AI,间接拿Stable Diffusion来用(这么做是为了勤俭本钱)。其余钻研员发明出本人的AI,生成的图象更为粗劣。
2019年,一支科研小组钻研猴子的神经流动,发现能够生成图象。2022年9月,荷兰拉德堡德大学利用AI来解释大脑信号,从中构建图象。意愿者们看了少量生疏人的脸孔后,大脑生成的图象和实际图象很接近。
2022年10月,德克萨斯州奥斯汀分校的钻研员发现,在人们听有声读物时扫描他们的大脑,能够用AI解码出脑海里的单词。
假如在头脑里给本人讲故事,AI也能够读掏出大略意思。
2022年十一月,斯坦福大学等三所顶尖高校开收回一个叫MinD-Vis的AI,能按照人们的大脑流动生成他们看到的图象。
从图象品质和内容精确度看,MinD-Vis比其余模型都强。
钻研AI生成图象的神经学家Thirza Dado说,她置信将来这类技术会开展得更好。“假如咱们持续训练算法,那末将来不光能精确描画出你正在看的脸,还能描画出你想象中的脸。好比你母亲的脸庞,她会表示得很生动。”“经过开发这个技术,咱们能解码和重构人类的客观体验,乃至能重现你的梦。真是让人着迷。这个技术也能用在临床上,好比和处于深度苏醒形态的患者交流。”
虽然迷信家们都刺激大众,这不算读心术,但看着科技一步步开展到这样,仍是有些不寒而栗啊。本人头脑里想的话、空想的场景,都能被科技捕获到,宇宙中再也不有能暗藏机密之处。似乎,本人的大脑不是公家房间,而是成为了一集体来人往的广场……