Post #1219

基于潜在扩散模型从人类脑活动中重建高清图像 这篇论文介绍了一种新的基于扩散模型的方法来从人类脑活动中重建图像，其称为稳定扩散模型（Stable Diffusion）。通过功能性磁共振成像技术（fMRI）获取人类脑活动，利用稳定扩散模型的不同组成部分（如潜在向量Z、条件输入C以及去噪U-Net的不同元素）与不同的脑功能相联系，来重建高保真度、高分辨率的图像。该方法不需要对深度学习模型进行额外的训练和微调，提供了一种新的理解扩散模型的框架，为从人类脑活动中重建图像提供了一种有前途的方法。 图左：框架概览，图右上：向人类展示的图像，图右下：根据人脑活动重建的图像 https://sites.google.com/view/stablediffusion-with-brain/