#RunPod
runpod-worker-comfy - 将ComfyUI作为无服务器API部署在RunPod平台
ComfyUIRunPodDockerAPIAI绘图Github开源项目
runpod-worker-comfy是一个将ComfyUI部署为无服务器API的开源项目。它能在RunPod平台上运行任意ComfyUI工作流,支持base64编码输入图像,可选将生成图像上传至AWS S3。项目提供三种Docker镜像,允许自定义模型和节点,基于Ubuntu和NVIDIA CUDA构建。通过RunPod API,用户可方便地与部署的端点交互,实现图像生成等功能。
RunPod - 全面的AI开发训练和扩展云平台
AI工具RunPodAIGPU云机器学习serverless
RunPod是专为AI设计的云平台,提供全面的开发、训练和扩展解决方案。平台特点包括按需GPU资源、无服务器推理、自动扩展、全球分布式GPU云、CLI工具和实时监控分析。RunPod简化AI基础设施管理,支持快速部署和高成本效益,适用于各种AI工作负载,是AI应用从开发到规模化的理想选择。
worker-vllm - 基于vLLM的OpenAI兼容无服务器LLM推理端点
vLLMRunPodOpenAILLM推理引擎Github开源项目
worker-vllm是一个基于vLLM推理引擎的OpenAI兼容无服务器端点部署工具。该项目可在RunPod Serverless上快速部署高性能的大语言模型(LLM)推理端点,操作简单便捷。worker-vllm充分利用vLLM的高效推理能力,为开发者提供快速、易用的LLM部署方案,有助于简化AI应用的构建过程。