bocoel
BoCoEL通过贝叶斯优化来选择高效小样本子集,从而减少评估大型语言模型所需的时间和资源。它支持GPT2、Pythia、LLAMA等模型,兼容huggingface的transformers和datasets,并采用模块化设计和高效数据表示方式。适合需要在预算限制下进行高效语言模型评估的用户。