#多模态对齐

Michelangelo项目提出'先对齐后生成'方法，解决2D图像或文本生成3D形状的难题。通过形状-图像-文本对齐空间，该技术缩小了不同模态间的差距。项目核心包括SITA-VAE模型(用于3D形状编码和重建)和ASLDM模型(学习多模态到形状空间的映射)。实验结果显示，这种方法能生成质量更高、多样性更强、且与输入条件语义一致性更好的3D形状。