MindEye:用 fMRI 重建所见图像
MindEye 把 fMRI 脑活动映射到 CLIP 等多模态空间,同时做图像检索和扩散重建,在 NSD 上刷新重建与检索表现。
机构
开放文生图模型 Stable Diffusion 系列背后的公司。
MindEye 把 fMRI 脑活动映射到 CLIP 等多模态空间,同时做图像检索和扩散重建,在 NSD 上刷新重建与检索表现。
Stable Diffusion 3 用整流流取代标准扩散、用 MM-DiT 取代 U-Net,图像内文字与提示词遵循显著变好,且从 8 亿到 80 亿参数可预测地扩展。