#Falcon2-11B

Falcon2-11B是一个110亿参数的因果解码器模型，由TII开发并在5000亿个RefinedWeb tokens上训练。该模型支持11种语言，采用Flash-Attention 2技术，具有8192tokens的上下文长度。模型在多个基准测试中表现优异，适用于语言模型研究、文本生成、摘要和对话等任务的微调。