任意街拍虚拟试穿：突破烦人限制的虚拟试穿任务

现在就去HeyBeauty免费试穿吧！ :stuck_out_tongue_winking_eye:

快速试穿API已正式发布！加入discord群组获取API使用指南！ :stuck_out_tongue_winking_eye:

任意街拍虚拟试穿是一种新的最先进的虚拟试穿方法，可以在街拍照片上产生高质量的试穿效果。它在用户面部ID保留和服装细节一致性之间达到了完美平衡。

其他演示

IDM PLUS OUTFITANYONE

真实用户照片的测试结果

更新

2024.05.25 快速试穿API已正式发布！
2024.05.08 网站heybeauty已上线！
2024.03.18 我们相信试穿的GPT-3时代已经到来。我们将很快发布用于创建服装模型和试穿的API。
2024.03.01 手部生成问题已解决，算法几乎不会再产生畸形的手。
2024.02.05 我们添加了肤色匹配功能，算法效果对所有种族的人更加友好。
2023.12.28 我们添加了许多创新技巧来解决用户面部ID一致性问题。
2023.11.12 首次实现了用户试穿的算法流程，不同姿势下试穿效果的鲁棒性让我们所有人都惊叹不已。
2023.07.20 经过无数次尝试，我们成功找到了将服装信息嵌入人体参数模型的方法。
2023.03.06 花费近75万美元后，收集了大量的3D人体数据集。
2022.12.15 几位博士聚餐时，其中一位提出开发一种对用户照片没有限制的试穿算法。

摘要

虚拟试穿任务旨在将商品服装图像转移到目标人物身上。现有方法专注于提高试穿数据集上的指标，但常常忽视了街拍照片中用户姿势的多样性和环境的复杂性。此外，如何保持用户ID和服装风格细节的一致性也是一个更棘手的话题。以上所有问题都阻碍了虚拟试穿任务在真实场景和在线电商中的实施。

在本文中，我们提出了任意街拍虚拟试穿，它在图像和谐性、服装细节一致性和用户面部ID保留之间达到了完美平衡。我们首先通过预训练的人体重建大模型对用户照片和服装照片中的人体进行建模。然后在参数空间中对姿势和体型进行变形以匹配用户的照片。作为我们人体参数模型的一部分，服装外观随人体变形而变化，并根据物理规律发生变化，从而能够和谐地适应用户的人体。渲染图像最终会通过一个检测和修复网络，该网络可以修复人体图像中不协调的因素。

在野外测试集上的大量实验证明了我们方法的优越性，在定性和定量方面都超越了最先进的方法。