超棒的图像合成
我们共同创立了一家初创公司 miguo.ai,致力于利用 AIGC 技术加速漫画和动画的制作。如果您正在寻找实习或全职职位,请随时将您的简历发送至 hr@miguocomics.com。
这是一个精心策划的资源列表,包括与图像合成(对象插入)相关的论文、数据集和相关链接。图像合成的目标是将一个前景插入背景图像以获得逼真的合成图像,通过解决前景和背景之间的不一致性(外观、几何和语义不一致)。 一般来说,图像合成可用于组合来自不同图像的视觉元素。
贡献
欢迎贡献。如果您希望贡献,请随时发送拉取请求。如果您对包含新部分有建议,请提出问题并在发送拉取请求之前进行讨论。
目录
在线演示
试试这个在线演示来进行图像合成,玩得开心!
综述
- Li Niu, Wenyan Cong, Liu Liu, Yan Hong, Bo Zhang, Jing Liang, Liqing Zhang: "再次使图像真实:深度图像合成的全面综述。" arXiv 预印本 arXiv:2106.14490 (2021). [arXiv] [幻灯片]
工具箱
我们将 10 多个与图像合成相关的功能集成到 libcom(图像合成库)中,包括图像混合、标准/绘画风格图像协调、阴影生成、对象放置、生成式合成、质量评估等。该库的最终目标是通过简单的 import libcom
解决与图像合成相关的所有问题。
论文
1. 图像混合
2. 图像协调
3. 对象阴影生成
Awesome-Object-Shadow-Generation
4. 对象反射生成
- Daniel Winter, Matan Cohen, Shlomi Fruchter, Yael Pritch, Alex Rav-Acha, Yedid Hoshen: "ObjectDrop:引导反事实对象移除和插入的真实感生成。" arXiv 预印本 arXiv:2403.18818 (2024) [arXiv]
- Shengjie Ma, Qian Shen, Qiming Hou, Zhong Ren, Kun Zhou: "用于低频照明环境下实时增强现实渲染的神经合成。" 中国科学:信息科学 (2021) [pdf]
5. 对象放置
6. 透视变换
- Junhong Gou, Bo Zhang, Li Niu, Jianfu Zhang, Jianlou Si, Chen Qian, Liqing Zhang: "通过关键点幻觉实现虚拟配饰试戴。" arXiv 预印本 arXiv:2310.17131 (2023) [arXiv]
- Bo Zhang, Yue Liu, Kaixin Lu, Li Niu, Liqing Zhang: "通过对应学习实现图像合成的空间变换。" arXiv 预印本 arXiv:2207.02398 (2022) [arXiv]
- Fangneng Zhan, Hongyuan Zhu, Shijian Lu: "用于图像合成的空间融合 GAN。" CVPR (2019) [pdf]
- Chen-Hsuan Lin, Ersin Yumer, Oliver Wang, Eli Shechtman, Simon Lucey: "ST-GAN:用于图像合成的空间变换生成对抗网络。" CVPR (2018) [pdf] [代码]
7. 遮挡
- Jonghyun Lee, Hansam Cho, Youngjoon Yoo, Seoung Bum Kim, Yonghyun Jeong: "合成并征服:基于扩散的 3D 深度感知可组合图像合成。" arXiv 预印本 arXiv:2401.09048 (2024) [pdf]
- Zan Li, Wencheng Wang, Fei Hou: "带深度配准的图像合成。" IJCAI (2023) [论文]
- Fangneng Zhan, Jiaxing Huang, Shijian Lu: "用于高保真图像合成的层次合成 GAN。" 控制论会刊 (2021) [arXiv]
- Samaneh Azadi, Deepak Pathak, Sayna Ebrahimi, Trevor Darrell: "组合式 GAN:学习图像条件二进制组合。" IJCV (2020) [arXiv] [代码]
8. 分辨率/锐度/噪声差异
9. 前景对象搜索
Awesome-Foreground-Object-Search
10. 生成式图像合成
Awesome-Generative-Image-Composition