Logo
Project Icon

EEVE-Korean-10.8B-v1.0

七阶段培训实现韩语大语言模型扩展的高效技术

词汇扩展技术大语言模型跨语言应用Github开源项目EEVE-Korean-10.8B-v1.0Huggingface韩语词汇拓展模型

通过子词嵌入与参数冻结的七阶训练，从英语模型有效扩展至韩语。该项目未进行指令微调，但在韩语任务中表现优异，并通过详细词汇扩展过程提升跨语言应用潜力。深入的词频分析和标记器训练确保模型拥有丰富的韩语词汇。了解更多技术细节，请查阅技术报告。

HuggingfaceHuggingface论文论文
介绍相关项目
polyglot-ko-12.8b-safetensors - Polyglot-ko 12.8B韩语模型的SafeTensors优化版
EleutherAIGithubHuggingfacePolyglot-kosafetensors开源项目文本生成模型韩语模型
该项目提供EleutherAI开发的Polyglot-ko 12.8B韩语模型的SafeTensors格式优化版。优化版采用1GB的较小分片大小，提高了模型的易用性和部署便捷性。在保持原始性能的同时，优化版显著提升了加载速度和存储效率。这一资源对于从事韩语自然语言处理的研究人员和开发者具有重要价值，可用于各类韩语NLP任务。
EXAONE-3.0-7.8B-Instruct - 高性能双语指令微调大语言模型
EXAONE-3.0-7.8B-InstructGithubHuggingface开源许可开源项目性能评估指令微调模型语言模型
EXAONE-3.0-7.8B-Instruct是LG AI Research开发的英韩双语生成模型，拥有78亿参数。经过8万亿token的预训练和指令微调后，该模型在多项基准测试中表现出色，与同等规模的顶级开源模型相媲美。它不仅支持英语和韩语的对话生成，还可应用于广泛的自然语言处理任务，为推动人工智能研究生态系统的发展做出了贡献。
COKAL-DPO_test-v2-13b - 采用LLaMA2架构的13B规模自动回归语言模型
COKAL-DPO_test-v2GithubHuggingfacetransformers开源项目模型模型开发训练数据集语言模型
模型由韩国公司Media Group Saramwa Soop与Marker合作开发，基于LLaMA2变压器架构，具备文本生成能力。基础模型为COKAL_pre_DPO_Test_v1-13b，采用DPO及SFT私有数据集训练，适用于多种文本生成任务。该研究项目由韩国科学技术信息通信部和光州广域市资助，旨在推动人工智能产业集群发展。
Llama-3-Open-Ko-8B-Instruct-preview - Llama-3基础上的韩语模型适用于对话和指导任务
GithubHuggingfaceLlama-3-Open-Ko-8B-Instruct-preview开源项目指令生成机器学习模型语言模型预训练
Llama-3-Open-Ko-8B-Instruct-preview利用公开资源预训练，处理17.7B+文本标记，为韩语对话和指导提供新起点。TPUv5e-256支持下的训练采用Chat Vector方法，增强自然语言生成。尽管尚未微调韩语指令，该模型已展示可靠性和高效性
EvoLLM-JP-v1-7B - 探索日语语言模型的进化潜力
EvoLLM-JP-v1-7BGithubHuggingfaceSakana AI开源项目日语模型演化模型合并研究开发
EvoLLM-JP-v1-7B是由Sakana AI开发的实验性日语语言模型，采用进化模型合并方法，由多个源模型合并而成。用户可通过Hugging Face平台在研究与开发领域利用该模型，尽管其提供了语言处理的新机遇，但尚未针对商业用途进行验证，需谨慎应用。
ko-sroberta-nli - 韩语句子语义嵌入的开源模型
GithubHuggingfaceko-sroberta-nli句子嵌入句子相似度开源项目模型语义搜索韩国语
ko-sroberta-nli模型通过将韩语文本转换为768维向量，支持多种自然语言处理任务如聚类和语义搜索。它在KorNLI和KorSTS数据集上的评估结果值得关注，且允许在不使用sentence-transformers时结合Hugging Face Transformers进行操作，实现灵活的词嵌入应用。这款工具具备便捷的安装和操作，可高效提升韩语语义处理能力。
KoSimCSE-roberta - 基于RoBERTa架构的韩语句子相似度预训练模型
GithubHuggingfaceKoSimCSERoBERTa开源项目模型语义相似度韩语句嵌入预训练模型
KoSimCSE-roberta是一个韩语句子向量嵌入预训练模型，基于RoBERTa架构和多任务学习方法构建。在语义文本相似度测试中，模型取得85.77%的评分。模型提供完整的预训练权重和推理环境，可用于计算韩语句子间的语义相似度，支持文本匹配等自然语言处理任务。
kobigbird-bert-base - 基于稀疏注意力的韩文BigBird预训练模型，优化长序列处理
BERTGithubHuggingfaceKoBigBird开源项目模型稀疏注意力长序列韩语
该项目利用稀疏注意力机制，扩展BERT模型以处理更长的序列。KoBigBird模型通过从韩文BERT检查点暖启动，能够以更低的计算成本处理最长达4096的序列。推荐使用BertTokenizer进行标记化，支持更改注意力模式和参数配置，以优化不同任务的性能。
kobert-base-v1 - 为韩语自然语言处理优化的BERT模型
BERTGithubHuggingface开源项目机器学习模型深度学习自然语言处理韩语
KoBERT是SKT Brain开发的韩语BERT模型，针对韩语特性进行了优化。这一预训练模型为文本分类、命名实体识别等韩语自然语言处理任务提供了有力支持。作为开源项目，KoBERT在GitHub上提供了完整代码和文档，方便研究人员和开发者使用和研究。
kpfbert - 面向韩语自然语言处理的BERT预训练模型
GithubHuggingfaceKpfBERT人工智能开源项目机器学习模型自然语言处理预训练模型
KpfBERT是一个针对韩语自然语言处理的预训练BERT模型。该开源项目提供韩语文本处理的基础模型支持，通过韩语语料库训练，可用于文本分类、命名实体识别等韩语NLP任务。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手，通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能，支持100+编程语言，与主流编辑器无缝集成，显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台，能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐，Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案，通过智能技术简化视频制作流程。无论是企业宣传还是个人分享，有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持，能够阅读和理解用户上传的文件内容，解析网页信息，并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题，Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术，为商家提供一键生成商品图和营销文案的服务，显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台，让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型，免费访问各种图像生成与AI训练工具，从Stable Diffusion等基础模型开始，轻松实现创新图像生成。体验前沿的AI技术，推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器，它将改变您观看视频的方式！SubCat结合了先进的人工智能技术，为您提供即时视频字幕翻译，无论是本地视频还是网络流媒体，让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台，利用前沿AI技术，为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图，再到文案生成，美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具，简化了选题、文献检索至论文撰写的整个过程。通过简单设定，平台可快速生成高质量论文大纲和全文，配合图表、参考文献等一应俱全，同时提供开题报告和答辩PPT等增值服务，保障数据安全，有效提升写作效率和论文质量。

使用协议隐私政策广告服务
投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号