相关项目
BakLLaVA
BakLLaVA项目通过优化基础模型、改进训练流程、使用定制数据集和重构LLaVA架构,将先进的多模态能力融入语言模型。该项目与LAION、Ontocord和Skunkworks OSS AI小组合作,致力于提升AI系统理解和生成视觉内容的能力。BakLLaVA为研究人员提供了探索视觉语言模型前沿的强大工具。
ggml_bakllava-1
仓库提供GGUF文件用于与llama.cpp集成的BakLLaVA-1推理,无需其他依赖。请注意,mmproj-model-f16.gguf文件格式仍在实验阶段,随时可能更改,建议使用llama.cpp的最新版本。
bakLlava-v1-hf
该模型基于Mistral-7B,支持多图像与多提示操作,性能在多项基准测试中优于Llama 2 13B,适用于学术任务和视觉问答。项目更新中,以进一步优化使用体验。