技术前沿与科研应用

研究人员利用人工智能根据大脑活动生成视频

日期:2023-07-03

|  来源:【字号:

 TechXplore网2023年5月25日消息,新加坡国立大学和香港中文大学的研究人员开发出一种能够通过脑部扫描生成视频的程序,运用功能性磁共振成像(fMRI)的技术,将通过成像检索到的数据与深度学习模型稳定扩散(Stable Diffusion)相结合,成功再现了从大脑活动中收集到的静态图像,生成了高质量的视频。该研究成果对于推动人脑思维研究具有重大意义。

功能性磁共振成像(fMRI)通常利用血氧水平依赖(BOLD)信号,每隔几秒钟捕捉一次大脑活动的图像。但是,这样生成的视频图像并不清晰。研究人员通过脑-视频(Mind-Video)模型中的fMRI解码器根据获取的大脑信号逐步学习,通过图像数据库进行训练并不断微调,最终生成了高质量的视频,具有完整的动作和场景动态,准确率达到85%。

信息来源:

https://techxplore.com/news/2023-05-ai-tool-generates-video-brain.html

附件: