Project Icon

vizier

开源黑盒优化框架助力机器学习研究

Open Source Vizier是一个Python开发的黑盒优化框架,源自Google Vizier项目。它提供用户、开发者和基准测试三大API,支持分布式多客户端环境。该框架集成了基于JAX的贝叶斯优化器,适用于超参数调优、进化算法和程序搜索等多种场景。作为开源项目,Vizier具有灵活的安装选项,可满足不同的优化研究需求。

开源Vizier:可靠灵活的黑盒优化

PyPI版本 持续集成 文档

Google AI博客 | 快速入门 | 文档 | 安装 | 引用与亮点

什么是开源(OSS) Vizier?

OSS Vizier是一个基于Python的黑盒优化和研究服务,它基于Google Vizier,后者是最早设计用于大规模工作的超参数调优服务之一。


OSS Vizier的分布式客户端-服务器系统。动画由Tom Small制作。

快速入门

作为用户的基本示例,以下展示了如何使用所有平面搜索空间类型来调优一个简单的目标函数:

from vizier.service import clients
from vizier.service import pyvizier as vz

# 要最大化的目标函数
def evaluate(w: float, x: int, y: float, z: str) -> float:
  return w**2 - y**2 + x * ord(z)

# 算法、搜索空间和指标
study_config = vz.StudyConfig(algorithm='DEFAULT')
study_config.search_space.root.add_float_param('w', 0.0, 5.0)
study_config.search_space.root.add_int_param('x', -2, 2)
study_config.search_space.root.add_discrete_param('y', [0.3, 7.2])
study_config.search_space.root.add_categorical_param('z', ['a', 'g', 'k'])
study_config.metric_information.append(vz.MetricInformation('metric_name', goal=vz.ObjectiveMetricGoal.MAXIMIZE))

# 设置客户端并开始优化。Vizier服务将被隐式创建
study = clients.Study.from_study_config(study_config, owner='my_name', study_id='example')
for i in range(10):
  suggestions = study.suggest(count=2)
  for suggestion in suggestions:
    params = suggestion.parameters
    objective = evaluate(params['w'], params['x'], params['y'], params['z'])
    suggestion.complete(vz.Measurement({'metric_name': objective}))

文档

OSS Vizier的接口包含三个主要API

  • 用户API: 允许用户优化他们的黑盒目标函数,并可选择为分布式多客户端设置设置服务器。
  • 开发者API: 定义了用于实现新优化算法的抽象和工具,用于研究和托管在服务中。
  • 基准测试API: 广泛的目标函数集合和方法,用于对算法进行基准测试和比较。

此外,它还包含高级API

  • Tensorflow Probability: 用于使用Tensorflow Probability和Flax编写贝叶斯优化算法。
  • PyGlove: 用于大规模进化实验和程序搜索,使用OSS Vizier作为分布式后端。

请查看OSS Vizier的ReadTheDocs文档以获取详细信息。

安装

快速开始: 要使用我们最先进的基于JAX的贝叶斯优化器调优目标,请运行:

pip install google-vizier[jax]

高级安装

最小版本: 要仅从requirements.txt安装核心服务和客户端API,请运行:

pip install google-vizier

完整安装: 要支持所有算法和基准测试,请运行:

pip install google-vizier[all]

特定安装: 如果你只需要OSS Vizier的特定部分"X",请运行:

pip install google-vizier[X]

这将安装requirements-X.txt中的附加组件。可能的选项包括:

  • requirements-jax.txt:算法和基准测试共享的Jax库。
  • requirements-tf.txt:基准测试使用的Tensorflow库。
  • requirements-algorithms.txt:算法的其他存储库(如EvoJAX)。
  • requirements-benchmarks.txt:基准测试的其他存储库(如NASBENCH-201)。
  • requirements-test.txt:测试代码所需的库。

完整安装后,通过运行run_tests.sh检查所有单元测试是否正常工作。OSS Vizier需要Python 3.10+,而仅客户端包需要Python 3.8+。

引用与亮点

引用Vizier: 如果您发现此代码有用,请考虑引用OSS Vizier论文以及Google Vizier论文

亮点: 我们跟踪著名用户媒体关注 - 如果OSS Vizier对您的工作有帮助,请告诉我们。

谢谢!

@inproceedings{oss_vizier,
  author    = {Xingyou Song and
               Sagi Perel and
               Chansoo Lee and
               Greg Kochanski and
               Daniel Golovin},
  title     = {Open Source Vizier: Distributed Infrastructure and API for Reliable and Flexible Black-box Optimization},
  booktitle = {Automated Machine Learning Conference, Systems Track (AutoML-Conf Systems)},
  year      = {2022},
}

@inproceedings{google_vizier,
  author    = {Daniel Golovin and
               Benjamin Solnik and
               Subhodeep Moitra and
               Greg Kochanski and
               John Karro and
               D. Sculley},
  title     = {Google Vizier: {A} Service for Black-Box Optimization},
  booktitle = {Proceedings of the 23rd {ACM} {SIGKDD} International Conference on
               Knowledge Discovery and Data Mining, Halifax, NS, Canada, August 13
               - 17, 2017},
  pages     = {1487--1495},
  publisher = {{ACM}},
  year      = {2017},
  url       = {https://doi.org/10.1145/3097983.3098043},
  doi       = {10.1145/3097983.3098043},
}
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

白日梦AI

白日梦AI提供专注于AI视频生成的多样化功能,包括文生视频、动态画面和形象生成等,帮助用户快速上手,创造专业级内容。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

讯飞绘镜

讯飞绘镜是一个支持从创意到完整视频创作的智能平台,用户可以快速生成视频素材并创作独特的音乐视频和故事。平台提供多样化的主题和精选作品,帮助用户探索创意灵感。

Project Cover

讯飞文书

讯飞文书依托讯飞星火大模型,为文书写作者提供从素材筹备到稿件撰写及审稿的全程支持。通过录音智记和以稿写稿等功能,满足事务性工作的高频需求,帮助撰稿人节省精力,提高效率,优化工作与生活。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号