openlogprobs
openlogprobs是一个Python库,用于从语言模型API中提取对数概率。它实现了多种算法,如topk搜索、精确解和二分查找,可从OpenAI等API中提取完整概率向量。该工具支持并行处理,提高了效率。openlogprobs主要用于语言模型反演研究,为学术研究提供支持。这个库易于安装和使用,适合自然语言处理研究人员使用。