MixtralKit
MixtralKit是一款高效的模型推理工具包,支持多种评估工具和资源。采用MoE架构提升性能和效率,Mixtral-8x7B模型表现卓越,并附有详细的安装和推理指南,方便研究人员和开发者快速上手。
opencompass
OpenCompass 2.0集成CompassKit、CompassHub和CompassRank三大关键组件,致力于实现大型语言模型评估的全面性、开放性和可复现性。平台特色包括全面的模型和数据集支持、高效的分布式评估系统、多样化的评估方法以及高度可扩展的模块化结构。