热门
导航
快讯
推荐文章
热门
导航
快讯
推荐文章
#mini-magnum-12b
mini-magnum-12b-v1.1-iMat-GGUF - 基于mini-magnum的量化优化大语言模型
Github
开源项目
大语言模型
llama.cpp
模型
量化
Huggingface
GGUF
mini-magnum-12b
mini-magnum-12b-v1.1模型的量化优化版本,采用iMatrix技术和fp16 GGUF进行量化处理。经验证可在llama.cpp、text-generation-web-ui等主流平台稳定运行,支持Flash Attention加速,并提供多种优化配置方案。项目包含详细的性能对比数据和部署指南,方便开发者快速上手使用。
1
1
使用协议
隐私政策
广告服务
投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI
·
鲁ICP备2024100362号-6
·
鲁公网安备37021002001498号