Azure OpenAI Proxy:连接OpenAI与Azure OpenAI的桥梁

Ray

azure-openai-proxy

Azure OpenAI Proxy:打通OpenAI与Azure OpenAI的智能桥梁 🌉

在人工智能快速发展的今天,OpenAI的GPT系列模型已经成为了众多开发者和企业的首选。然而,由于各种原因,很多用户可能更倾向于使用Microsoft Azure提供的OpenAI服务。为了解决这个问题,一个名为Azure OpenAI Proxy的开源项目应运而生,它巧妙地在OpenAI和Azure OpenAI之间搭建了一座智能桥梁。

什么是Azure OpenAI Proxy?

Azure OpenAI Proxy是一个为Azure OpenAI API设计的代理服务,它可以将标准的OpenAI API请求转换为Azure OpenAI API请求。这个项目的主要目标是为各种开源的ChatGPT网页项目提供后端支持,同时也可以作为一个简单的OpenAI API代理,解决某些地区OpenAI API访问受限的问题。

Azure OpenAI Proxy架构图

Azure OpenAI Proxy的主要特性

  1. 🌐 全面支持Azure OpenAI的API
  2. 🧠 支持所有Azure OpenAI模型和自定义微调模型
  3. 🗺️ 支持自定义Azure部署名称和OpenAI模型之间的映射
  4. 🔄 支持反向代理和正向代理两种使用方式
  5. 👍 支持模拟Azure不支持的OpenAI API

这些特性使得Azure OpenAI Proxy成为了连接OpenAI和Azure OpenAI服务的理想选择,为开发者提供了极大的灵活性和便利性。

支持的API

目前,Azure OpenAI服务的最新版本支持以下三个主要API:

  • /v1/chat/completions
  • /v1/completions
  • /v1/embeddings

值得注意的是,对于Azure尚未支持的其他OpenAI API,Azure OpenAI Proxy会以模拟的方式返回结果,以确保兼容性。这意味着即使是使用了一些Azure OpenAI尚未直接支持的功能,项目也能够正常运行。

如何使用Azure OpenAI Proxy?

Azure OpenAI Proxy提供了两种主要的使用方式:反向代理和正向代理。

1. 反向代理模式

在反向代理模式下,Azure OpenAI Proxy充当了一个OpenAI API网关。用户可以通过设置环境变量来配置代理服务,包括服务监听地址、代理模式、Azure OpenAI端点、API版本、模型映射等。

以下是一个使用curl命令调用反向代理的示例:

curl https://{your-custom-domain}/v1/chat/completions \
  -H "Content-Type: application/json" \
  -H "Authorization: Bearer {your azure api key}" \
  -d '{
    "model": "gpt-3.5-turbo",
    "messages": [{"role": "user", "content": "Hello!"}]
  }'

2. 正向代理模式

在正向代理模式下,Azure OpenAI Proxy可以直接作为HTTP代理使用。这种模式特别适合那些需要通过代理访问OpenAI API的场景。

例如,可以在终端中设置以下环境变量来使用https代理:

export https_proxy=https://{your-domain}.com

然后就可以像往常一样调用OpenAI API,但实际上请求会通过Azure OpenAI Proxy转发到Azure OpenAI服务。

部署Azure OpenAI Proxy

Azure OpenAI Proxy提供了Docker部署方式,使得部署过程变得简单快捷。以下是使用Docker部署Azure OpenAI Proxy的步骤:

  1. 拉取Docker镜像:

    docker pull ishadows/azure-openai-proxy:latest
    
  2. 运行Docker容器:

    docker run -d -p 8080:8080 --name=azure-openai-proxy \
      --env AZURE_OPENAI_ENDPOINT={your azure endpoint} \
      --env AZURE_OPENAI_MODEL_MAPPER={your custom model mapper} \
      ishadows/azure-openai-proxy:latest
    
  3. 测试部署:

    curl https://localhost:8080/v1/chat/completions \
      -H "Content-Type: application/json" \
      -H "Authorization: Bearer {your azure api key}" \
      -d '{
        "model": "gpt-3.5-turbo",
        "messages": [{"role": "user", "content": "Hello!"}]
      }'
    

模型映射机制

Azure OpenAI Proxy的一个重要特性是其灵活的模型映射机制。通过AZURE_OPENAI_MODEL_MAPPER环境变量,用户可以定义自定义的模型映射关系。这个机制特别适用于那些部署名称与模型名称不同的自定义微调模型。

例如,你可以定义如下映射:

  • gpt-3.5-turbo -> gpt-35-turbo-upgrade
  • gpt-3.5-turbo-0301 -> gpt-35-turbo-0301-fine-tuned

这种灵活的映射机制确保了Azure OpenAI Proxy能够适应各种复杂的部署场景。

Azure OpenAI Proxy的优势

  1. 简化集成过程:开发者可以使用熟悉的OpenAI API格式,而无需修改现有代码来适应Azure OpenAI的特定要求。

  2. 提高可移植性:项目可以轻松在OpenAI和Azure OpenAI之间切换,提高了代码的可移植性和灵活性。

  3. 扩展Azure OpenAI的功能:通过模拟一些Azure尚未支持的OpenAI API,Azure OpenAI Proxy扩展了Azure OpenAI的实用性。

  4. 增强安全性:作为一个中间层,Azure OpenAI Proxy可以增加额外的安全控制和监控。

  5. 优化成本:通过使用Azure OpenAI服务,企业可能获得更好的定价方案,特别是对于大规模使用场景。

Azure OpenAI Proxy优势

未来展望

随着AI技术的不断发展,Azure OpenAI Proxy这样的工具将变得越来越重要。它不仅简化了开发流程,还为企业提供了更多选择和灵活性。我们可以期待看到以下方面的进展:

  1. 支持更多的Azure OpenAI API和模型
  2. 提供更丰富的自定义选项和配置
  3. 集成更多的安全特性和监控功能
  4. 优化性能,提高大规模部署的效率

结语

Azure OpenAI Proxy作为OpenAI和Azure OpenAI之间的桥梁,为开发者和企业提供了一个强大而灵活的工具。它不仅简化了从OpenAI到Azure OpenAI的迁移过程,还为AI应用的部署和扩展提供了新的可能性。无论你是正在开发ChatGPT应用,还是寻求更安全、更可控的AI服务部署方案,Azure OpenAI Proxy都值得你深入探索和尝试。

如果你对Azure OpenAI Proxy感兴趣,可以访问其GitHub仓库了解更多详情,或者直接开始使用这个强大的工具来优化你的AI开发流程。让我们一起拥抱AI的未来,创造更多令人惊叹的应用!🚀🤖

avatar
0
0
0
最新项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号