项目介绍:comfyui-mixlab-nodes
起源与背景
comfyui-mixlab-nodes
是一个强大的插件集合,旨在扩展和增强 ComfyUI 的功能。最新版本支持 Python 3.11 和 Torch 2.3.1 + cu121,非常适合希望在 ComfyUI 中集成先进功能和工具的开发者和设计师。本项目还提供了一个活跃的 Discord 社区,用户可以在其中交流和获取支持。
主要功能
视频生成与工作流
项目新增了极具创新的视频生成功能,支持 Kling、RunwayGen3 和 LumaDreamMachine。开发者可以通过提供的工作流下载链接,轻松获取和部署这些功能。
对话与语音识别
新增了 SimulateDevDesignDiscussions,需要安装舒适的工具如 swarm 和 Comfyui-ChatTTS。此外,还增加了 SenseVoice 和 JS-SDK,方便开发者在前端项目中使用 ComfyUI。
图像和文本生成
- 提供了 TextToImage Siliconflow 节点,可以方便地调用图像生成技术。
- 右键菜单新增 text-to-text 支持,简化了 prompt 词的补全过程,无论是云端还是本地的 LLM 都可使用。
应用模式与批处理
移动端适配方面,优化了 App 模式的 Mask 编辑器,增添了 Batch Prompt 功能,允许用户批量处理动态提示词,提高了工作效率。
接口与API
通过增加 API Key Input 节点,项目大幅优化了 LLM 相关节点,为将来的 agent 模式打下了基础。同时,用户还可以利用 SiliconflowLLM 节点,免费使用由 Siliconflow 提供的 LLM 服务。
热门插件
该项目推荐了一些与 ComfyUI 集成的插件,例如 comfyui-liveportrait、Comfyui-ChatTTS 和 comfyui-sound-lab 等,进一步提高了系统的多样性和可扩展性。
Workflow-to-APP
- 新增了 AppInfo 节点,用户可以轻松地将工作流转变成 Web APP。
- 支持多个 Web app 切换及动态提示。
- 允许在 comfyui 的背景上显示输出,支持多种输出选项如文本和图像。
实时设计与模型支持
- 引入了 ScreenShareNode 与 FloatingVideoNode,支持从任意软件捕获屏幕像素流。
- 支持多种 GPT 模型的调用,如 Local LLM 和 ChatGPT。
实用工具与扩展节点
项目创建了多种节点来简化开发过程,包括 Color 节点和 DynamicDelayByText 节点等,使得 UI 的自定义和延迟执行功能更为简单。此外,还有强大的 Mask 编辑器和图像边缘处理工具。
安装与使用
用户可以简单地克隆仓库到 ComfyUI 的 custom_nodes 目录中,按照说明安装相应的依赖项,非常易于上手。
合作与社区
项目邀请广大开发者通过 Github 讨论区分享他们的使用体验和反馈。对于商务合作,请通过提供的邮箱进行联系,更多内测功能可以访问官网或关注微信公众号。
在 comfyui-mixlab-nodes 的帮助下,用户将能体验到更高效、更灵活的 UI 开发和设计。这一插件集合将继续扩展其功能,以满足各种专业需求。