gpustat-web: 一个方便监控多节点GPU集群的Web界面工具

Ray

gpustat-web简介

gpustat-web是一个基于gpustat的Web界面工具,可以方便地聚合和监控多个节点的GPU状态信息。它由Jongwook Choi开发,是一个开源项目,采用MIT许可证发布。

gpustat-web的主要功能是通过SSH连接到多个主机,收集每个主机上运行gpustat命令的结果,然后将这些信息整合到一个Web界面上展示。这使得用户可以在一个页面上轻松地查看整个GPU集群的状态。

gpustat-web界面截图

主要特性

gpustat-web具有以下主要特性:

  1. 多节点监控:可以同时监控多个主机上的GPU状态。

  2. 实时更新:通过WebSocket技术实现数据的实时更新。

  3. 多种输出格式:支持HTML、纯文本、ANSI彩色文本等多种输出格式。

  4. 安全连接:支持HTTPS协议,保证数据传输的安全性。

  5. 灵活配置:可以通过查询字符串选择要显示的节点子集。

  6. 扩展性:可以通过自定义命令添加额外的监控信息,如CPU使用率等。

安装与使用

安装

gpustat-web可以通过pip轻松安装:

pip install gpustat-web

注意,gpustat-web需要Python 3.6+版本。

基本使用

安装完成后,可以通过以下命令启动gpustat-web:

gpustat-web --port 48109 HOST1 [HOST2 ...]

这将启动一个Web服务器,监听48109端口,并连接到指定的主机(HOST1, HOST2等)。确保你可以通过SSH无密码登录这些主机。

访问Web界面

启动服务后,可以通过浏览器访问以下URL:

  • http://localhost:48109/: 主页面,通过WebSocket自动更新
  • http://localhost:48109/gpustat.html: 静态HTML页面
  • http://localhost:48109/gpustat.txt: 纯文本格式
  • http://localhost:48109/gpustat.ansi: 带ANSI颜色代码的文本格式

高级配置

  1. HTTPS支持: 使用--ssl-certfile--ssl-keyfile选项可以启用HTTPS:

    gpustat-web --port 48109 --ssl-certfile cert.pem --ssl-keyfile key.pem HOST1 [HOST2 ...]
    
  2. 选择性显示节点: 通过查询字符串可以选择显示特定节点:

    http://localhost:48109/?nodes=gpu001,gpu002
    
  3. 添加CPU使用率信息: 可以通过--exec选项扩展显示的信息:

    python -m gpustat_web --exec 'gpustat --color --gpuname-width 25 && echo -en "CPU : \033[0;31m" && cpu-usage | ascii-bar 27'
    

注意事项

  1. 安全性:

    • 使用HTTPS可以加强数据传输的安全性。
    • 谨慎使用--no-verify-host选项,因为它会绕过SSH主机密钥验证。
  2. SSH配置: gpustat-web使用的asyncssh库不遵循~/.ssh/config文件的配置,这可能会导致一些SSH设置无法正常工作。

  3. 资源使用: 由于需要持续从多个节点收集数据,gpustat-web可能会占用较多的网络资源。在大型集群中使用时需要注意这一点。

  4. 项目状态: gpustat-web目前处于alpha阶段,可能存在一些错误和异常未被很好地处理。在生产环境中使用时需要谨慎。

社区与支持

gpustat-web是一个开源项目,欢迎社区贡献。截至2024年初,该项目在GitHub上有超过300颗星和38个分支。如果你在使用过程中遇到问题,可以在GitHub Issues页面提出。

结语

gpustat-web为管理大型GPU集群提供了一个直观、便捷的监控工具。尽管它目前还处于早期阶段,但已经展现出了强大的潜力。随着项目的不断发展和社区的支持,相信gpustat-web会成为GPU集群管理中不可或缺的工具之一。

avatar
0
0
0
最新项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号