热门
导航
快讯
推荐文章
热门
导航
快讯
推荐文章
#Optimum Quanto
optimum-quanto - PyTorch模型量化框架 提升性能和效率
Optimum Quanto
量化
PyTorch
机器学习
模型优化
Github
开源项目
Optimum Quanto是专为Optimum设计的PyTorch量化框架。它支持eager模式、多设备部署,自动插入量化/反量化存根和操作,实现从浮点到动态/静态量化模型的无缝转换。支持多种精度的权重和激活量化,有效提升模型性能和内存效率。该框架为Hugging Face和原生PyTorch模型提供简便的量化流程。
1
1
相关文章
Optimum Quanto: 为 PyTorch 模型提供高效量化的强大工具
2 个月前
使用协议
隐私政策
广告服务
投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI
·
鲁ICP备2024100362号-6
·
鲁公网安备37021002001498号