Project Icon

adetailer

Stable Diffusion WebUI自动掩码和修复增强扩展

ADetailer是Stable Diffusion WebUI的扩展插件,提供自动掩码和修复功能。它支持人脸、手部和人物等多种检测模型,允许自定义检测阈值和掩码处理。该工具兼容ControlNet,支持多种修复模式,可有效提升图像细节。ADetailer简化了图像处理流程,是一个功能强大的AI辅助图像编辑工具。

ADetailer

ADetailer 是 stable diffusion webui 的一个扩展,可以自动进行遮罩和修复。它类似于 Detection Detailer。

安装

您可以直接从扩展标签页安装它。

image

或者

(来自 Mikubill/sd-webui-controlnet)

  1. 打开"扩展"标签页。
  2. 在标签页中打开"从 URL 安装"标签。
  3. 在"扩展的 git 仓库 URL"中输入 https://github.com/Bing-su/adetailer.git
  4. 点击"安装"按钮。
  5. 等待 5 秒,您将看到消息"已安装到 stable-diffusion-webui\extensions\adetailer。使用已安装标签页重启"。
  6. 转到"已安装"标签页,点击"检查更新",然后点击"应用并重启 UI"。(下次您也可以使用此方法更新扩展。)
  7. 完全重启 A1111 webui,包括您的终端。(如果您不知道什么是"终端",您可以重启计算机:关闭计算机然后再打开。)

选项

模型、提示词
ADetailer 模型决定要检测什么。None = 禁用
ADetailer 模型类别要检测的类别名称,用逗号分隔。仅在使用 YOLO World 模型时可用如果为空,使用默认值。
默认值 = COCO 80 类别
ADetailer 提示词,负面提示词要应用的提示词和负面提示词如果留空,将使用与输入相同的内容。
跳过 img2img跳过 img2img。实际上,这是通过将 img2img 的步骤数更改为 1 来实现的。仅适用于 img2img
检测
检测模型置信度阈值只有检测模型置信度高于此阈值的对象才会用于修复。
遮罩最小/最大比例仅使用面积在整个图像面积这些比例之间的遮罩。
仅遮罩前 k 个最大的仅使用边界框面积最大的 k 个对象。0 表示禁用

如果您想排除背景中的对象,请尝试将最小比例设置为约 0.01

遮罩预处理
遮罩 x, y 偏移水平和垂直移动遮罩
遮罩腐蚀(-) / 膨胀(+)扩大或缩小检测到的遮罩。opencv 示例
遮罩合并模式None:修复每个遮罩
Merge:合并所有遮罩并修复
Merge and Invert:合并所有遮罩并反转,然后修复

按此顺序应用:x, y 偏移 → 腐蚀/膨胀 → 合并/反转。

修复

每个选项对应于修复标签页上的相应选项。因此,有关如何使用每个选项的详细信息,请参阅修复标签页。

ControlNet 修复

如果您安装了 ControlNet 并有 ControlNet 模型,您可以使用 ControlNet 扩展。

支持 inpaint, scribble, lineart, openpose, tile, depth ControlNet 模型。一旦您选择了一个模型,预处理器会自动设置。它独立于 Controlnet 扩展设置的模型工作。

如果您选择 Passthrough,将使用您在 ADetailer 外部设置的 ControlNet 设置。

高级选项

API 请求示例:wiki/REST-API

[SEP], [SKIP], [PROMPT] 标记:wiki/Advanced

媒体

模型

模型目标mAP 50mAP 50-95
face_yolov8n.pt2D / 真实人脸0.6600.366
face_yolov8s.pt2D / 真实人脸0.7130.404
hand_yolov8n.pt2D / 真实手0.7670.505
person_yolov8n-seg.pt2D / 真实人物0.782 (bbox)
0.761 (mask)
0.555 (bbox)
0.460 (mask)
person_yolov8s-seg.pt2D / 真实人物0.824 (bbox)
0.809 (mask)
0.605 (bbox)
0.508 (mask)
mediapipe_face_full真实人脸--
mediapipe_face_short真实人脸--
mediapipe_face_mesh真实人脸--

YOLO 模型可以在 huggingface Bingsu/adetailer 上找到。

有关 YOLO8 模型的详细描述,请参见:https://docs.ultralytics.com/models/yolov8/#overview

YOLO World 模型:https://docs.ultralytics.com/models/yolo-world/

附加模型

将您的 ultralytics yolo 模型放在 models/adetailer 中。模型名称应以 .pt 结尾。

它必须是边界框检测或分割模型,并使用所有标签。

工作原理

ADetailer 通过三个简单的步骤工作。

  1. 创建图像。
  2. 使用检测模型检测对象并创建遮罩图像。
  3. 使用步骤 1 中的图像和步骤 2 中的遮罩进行修复。

开发

ADetailer 仅使用 stable-diffusion 1.5 模型开发和测试,仅适用于 AUTOMATIC1111/stable-diffusion-webui 仓库的最新版本。

许可

ADetailer 是使用两个 AGPL 许可作品(stable-diffusion-webui, ultralytics)的衍生作品,因此根据 AGPL 许可分发。

另请参阅

项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

稿定AI

稿定设计 是一个多功能的在线设计和创意平台,提供广泛的设计工具和资源,以满足不同用户的需求。从专业的图形设计师到普通用户,无论是进行图片处理、智能抠图、H5页面制作还是视频剪辑,稿定设计都能提供简单、高效的解决方案。该平台以其用户友好的界面和强大的功能集合,帮助用户轻松实现创意设计。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号