LangChain Extract: 强大的信息提取工具

langchain-extract

LangChain Extract: 强大的信息提取工具

在当今数据驱动的世界中,从大量非结构化文本中提取有价值的信息变得越来越重要。LangChain Extract应运而生,它是一个基于LangChain和大语言模型(LLM)的开源项目,旨在简化信息提取过程,为开发者和数据分析师提供强大而灵活的工具。

项目概述

LangChain Extract是由LangChain团队开发的一个开源项目,托管在GitHub上。它的核心目标是提供一个简单易用的Web服务,允许用户从文本和文件中提取结构化信息。该项目利用了FastAPI、LangChain和PostgreSQL等先进技术,为用户提供了一个功能丰富、可扩展的信息提取平台。

LangChain Extract Demo

主要功能

LangChain Extract提供了一系列强大的功能:

基于FastAPI的REST API: 提供了易于使用的API接口,方便集成到各种应用中。
OpenAPI文档: 详细的API文档,帮助开发者快速上手。
JSON Schema定义: 允许用户使用JSON Schema定义提取模式,灵活定制提取内容。
示例优化: 支持添加示例来提高提取结果的质量。
数据库存储: 将提取器和示例保存在数据库中,方便管理和复用。
多种文件支持: 能够从文本和二进制文件中提取信息。
LangServe集成: 提供LangServe端点,可与LangChain的RemoteRunnable无缝集成。

使用示例

以下是一个简单的使用示例,展示了如何创建一个提取器并使用它来提取信息:

创建提取器:

curl -X 'POST' \
  'http://localhost:8000/extractors' \
  -H 'accept: application/json' \
  -H 'Content-Type: application/json' \
  -H "x-key: ${USER_ID}" \
  -d '{
  "name": "Personal Information",
  "description": "Use to extract personal information",
  "schema": {
      "type": "object",
      "title": "Person",
      "required": [
        "name",
        "age"
      ],
      "properties": {
        "age": {
          "type": "integer",
          "title": "Age"
        },
        "name": {
          "type": "string",
          "title": "Name"
        }
      }
    },
  "instruction": "Use information about the person from the given user input."
}'

使用提取器提取信息:

curl -s -X 'POST' \
'http://localhost:8000/extract' \
-H 'accept: application/json' \
-H 'Content-Type: multipart/form-data' \
-H "x-key: ${USER_ID}" \
-F 'extractor_id=e07f389f-3577-4e94-bd88-6b201d1b10b9' \
-F 'text=my name is chester and i am 20 years old. My name is eugene and I am 1 year older than chester.' \
-F 'mode=entire_document' \
-F 'file=' | jq .

这个示例展示了如何创建一个提取个人信息的提取器,并使用它从给定文本中提取姓名和年龄信息。