微软｜透过大脑看世界：用人脑信号重建视觉感知图像

Seeing through the Brain: Image Reconstruction of Visual Perception from Human Brain Signals

Yu-Ting Lan, Kan Ren, Yansen Wang, Wei-Long Zheng, Dongsheng Li, Bao-Liang Lu, Lili Qiu
[Microsoft Research & Shanghai Jiao Tong University]

透过大脑看世界：用人脑信号重建视觉感知图像

动机：研究人类视觉感知皮层反应已经成为一个研究热点，这可以显著地激励计算认知系统的发展。随着生理技术的快速发展，如功能性磁共振成像(fMRI)或脑电图(EEG)，现在可以记录视觉诱发的人脑活动以进行进一步分析。
方法：提出一个名为NEUROIMAGEN的综合流程，用于从EEG信号重建视觉刺激图像。具体来说，结合了一种新的多级感知信息解码，从给定的EEG数据中提取多粒度输出。然后，潜扩散模型将利用提取的信息重建高分辨率视觉刺激图像。
优势：实验结果显示了图像重建的有效性以及所提出的方法的卓越定量性能。

提出一种从EEG信号重建视觉刺激图像的综合方法，通过多级感知信息解码和潜扩散模型实现高分辨率图像重建，展现了其在处理多噪声动态EEG数据上的优势。