#文本到图像扩散模型
相关项目
custom-diffusion
该项目提供了一种高效的文本到图像扩散模型微调方法。只需调整部分模型参数,即可在短时间内完成训练,并减少存储需求。项目还支持多概念组合,附带新数据集和完整的训练步骤。适用于多种类别和应用场景。
TheChosenOne
TheChosenOne项目是《The Chosen One: Consistent Characters in Text-to-Image Diffusion Models》论文的非官方PyTorch实现。该项目使用Diffuser框架,致力于在文本到图像扩散模型中实现一致性角色生成。项目提供训练和推理指南,计划支持ControlNet和局部图像编辑功能。基于diffuser 0.24.0.dev0版本开发,并包含详细的安装和配置说明。
AlignProp
AlignProp是一种创新的文本到图像扩散模型优化方法,通过端到端反向传播奖励梯度来实现。该方法能有效对齐模型与下游任务目标,包括图像-文本语义一致性、美学质量和可控性。相比传统强化学习方法,AlignProp能在更少训练步骤内获得更高奖励,并且概念简单,为扩散模型优化提供了高效直接的解决方案。