Project Icon

vizier

开源黑盒优化框架助力机器学习研究

Open Source Vizier是一个Python开发的黑盒优化框架,源自Google Vizier项目。它提供用户、开发者和基准测试三大API,支持分布式多客户端环境。该框架集成了基于JAX的贝叶斯优化器,适用于超参数调优、进化算法和程序搜索等多种场景。作为开源项目,Vizier具有灵活的安装选项,可满足不同的优化研究需求。

开源Vizier:可靠灵活的黑盒优化

PyPI版本 持续集成 文档

Google AI博客 | 快速入门 | 文档 | 安装 | 引用与亮点

什么是开源(OSS) Vizier?

OSS Vizier是一个基于Python的黑盒优化和研究服务,它基于Google Vizier,后者是最早设计用于大规模工作的超参数调优服务之一。


OSS Vizier的分布式客户端-服务器系统。动画由Tom Small制作。

快速入门

作为用户的基本示例,以下展示了如何使用所有平面搜索空间类型来调优一个简单的目标函数:

from vizier.service import clients
from vizier.service import pyvizier as vz

# 要最大化的目标函数
def evaluate(w: float, x: int, y: float, z: str) -> float:
  return w**2 - y**2 + x * ord(z)

# 算法、搜索空间和指标
study_config = vz.StudyConfig(algorithm='DEFAULT')
study_config.search_space.root.add_float_param('w', 0.0, 5.0)
study_config.search_space.root.add_int_param('x', -2, 2)
study_config.search_space.root.add_discrete_param('y', [0.3, 7.2])
study_config.search_space.root.add_categorical_param('z', ['a', 'g', 'k'])
study_config.metric_information.append(vz.MetricInformation('metric_name', goal=vz.ObjectiveMetricGoal.MAXIMIZE))

# 设置客户端并开始优化。Vizier服务将被隐式创建
study = clients.Study.from_study_config(study_config, owner='my_name', study_id='example')
for i in range(10):
  suggestions = study.suggest(count=2)
  for suggestion in suggestions:
    params = suggestion.parameters
    objective = evaluate(params['w'], params['x'], params['y'], params['z'])
    suggestion.complete(vz.Measurement({'metric_name': objective}))

文档

OSS Vizier的接口包含三个主要API

  • 用户API: 允许用户优化他们的黑盒目标函数,并可选择为分布式多客户端设置设置服务器。
  • 开发者API: 定义了用于实现新优化算法的抽象和工具,用于研究和托管在服务中。
  • 基准测试API: 广泛的目标函数集合和方法,用于对算法进行基准测试和比较。

此外,它还包含高级API

  • Tensorflow Probability: 用于使用Tensorflow Probability和Flax编写贝叶斯优化算法。
  • PyGlove: 用于大规模进化实验和程序搜索,使用OSS Vizier作为分布式后端。

请查看OSS Vizier的ReadTheDocs文档以获取详细信息。

安装

快速开始: 要使用我们最先进的基于JAX的贝叶斯优化器调优目标,请运行:

pip install google-vizier[jax]

高级安装

最小版本: 要仅从requirements.txt安装核心服务和客户端API,请运行:

pip install google-vizier

完整安装: 要支持所有算法和基准测试,请运行:

pip install google-vizier[all]

特定安装: 如果你只需要OSS Vizier的特定部分"X",请运行:

pip install google-vizier[X]

这将安装requirements-X.txt中的附加组件。可能的选项包括:

  • requirements-jax.txt:算法和基准测试共享的Jax库。
  • requirements-tf.txt:基准测试使用的Tensorflow库。
  • requirements-algorithms.txt:算法的其他存储库(如EvoJAX)。
  • requirements-benchmarks.txt:基准测试的其他存储库(如NASBENCH-201)。
  • requirements-test.txt:测试代码所需的库。

完整安装后,通过运行run_tests.sh检查所有单元测试是否正常工作。OSS Vizier需要Python 3.10+,而仅客户端包需要Python 3.8+。

引用与亮点

引用Vizier: 如果您发现此代码有用,请考虑引用OSS Vizier论文以及Google Vizier论文

亮点: 我们跟踪著名用户媒体关注 - 如果OSS Vizier对您的工作有帮助,请告诉我们。

谢谢!

@inproceedings{oss_vizier,
  author    = {Xingyou Song and
               Sagi Perel and
               Chansoo Lee and
               Greg Kochanski and
               Daniel Golovin},
  title     = {Open Source Vizier: Distributed Infrastructure and API for Reliable and Flexible Black-box Optimization},
  booktitle = {Automated Machine Learning Conference, Systems Track (AutoML-Conf Systems)},
  year      = {2022},
}

@inproceedings{google_vizier,
  author    = {Daniel Golovin and
               Benjamin Solnik and
               Subhodeep Moitra and
               Greg Kochanski and
               John Karro and
               D. Sculley},
  title     = {Google Vizier: {A} Service for Black-Box Optimization},
  booktitle = {Proceedings of the 23rd {ACM} {SIGKDD} International Conference on
               Knowledge Discovery and Data Mining, Halifax, NS, Canada, August 13
               - 17, 2017},
  pages     = {1487--1495},
  publisher = {{ACM}},
  year      = {2017},
  url       = {https://doi.org/10.1145/3097983.3098043},
  doi       = {10.1145/3097983.3098043},
}
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

稿定AI

稿定设计 是一个多功能的在线设计和创意平台,提供广泛的设计工具和资源,以满足不同用户的需求。从专业的图形设计师到普通用户,无论是进行图片处理、智能抠图、H5页面制作还是视频剪辑,稿定设计都能提供简单、高效的解决方案。该平台以其用户友好的界面和强大的功能集合,帮助用户轻松实现创意设计。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号