#KoAlpaca
KoAlpaca - 开源韩语大语言模型,支持多种规模和部署方式
KoAlpaca自然语言处理深度学习语言模型人工智能Github开源项目
KoAlpaca是基于Stanford Alpaca训练方法的韩语大语言模型项目。该项目提供多种规模模型,包括基于Polyglot-ko和LLAMA的版本,支持全量微调和LoRA等训练方式。KoAlpaca开放网页聊天界面和Hugging Face上的模型,便于研究人员和开发者使用及改进韩语大语言模型。
KoAlpaca-Polyglot-5.8B - 韩文文本生成模型的优化与安全增强
训练数据集Github模型开源项目KoAlpacaHuggingface语言生成
该项目基于EleutherAI的polyglot-ko-5.8b模型,并在KoAlpaca数据集v1.1b上进行了优化,提升了韩文文本生成的准确性和效率。新增的最大分片1GB的Safetensor模型权重,显著增强了模型的稳定性。通过应用Adam优化器和特定训练参数,该模型在短期内达到了预期效果。详细信息和代码可在KoAlpaca的Github仓库中获取。