#视频重建

MinD-Video是一种从大脑记录重建高质量视频的新型框架。该技术利用掩蔽大脑建模、多模态对比学习和增强稳定扩散模型，从fMRI数据中学习时空信息。MinD-Video可重建任意帧率的视频，在语义分类任务中准确率达85%，结构相似性指数达0.19，较先前技术提升45%。这项研究在NeurIPS 2023获得口头报告资格，为理解人类认知过程提供了新的途径。