question_extractor
question_extractor是一个开源项目,能够自动从文本数据中提取问答对。它利用ChatGPT处理大量文档,快速生成可用于训练语言模型的数据集。该项目支持并行处理,可以有效处理长文本,适用于各种文档类型。对于需要构建专业领域问答数据集的研究人员和开发者,question_extractor提供了一个高效、自动化的解决方案。