Project Icon

retext

可扩展的自然语言转换框架

retext是一个基于插件的自然语言转换框架,可在服务器、客户端和Deno等多种环境中使用。它通过结构化数据处理自然语言,支持拼写检查、排版优化和可读性分析等功能。retext生态系统包含多个语言处理包,并允许开发自定义插件。作为unified项目的开源组件,retext使用nlcst语法树提供强大的自然语言支持,适用于文本分析、内容优化和自动校对等场景。其活跃的社区不断贡献新插件,使retext成为灵活可靠的文本处理解决方案。

retext

构建 覆盖率 下载量 大小 赞助商 支持者 聊天

retext 是一个通过插件转换自然语言的工具。这些插件可以检查和修改自然语言。你可以在服务器、客户端、Deno 等环境中使用 retext。

简介

retext 是一个生态系统,其中的插件将自然语言作为结构化数据处理,特别是 CST(具体语法树)。语法树使程序能够轻松处理散文。我们将这些程序称为插件。插件可以检查和修改树。你可以使用许多现有的插件,也可以创建自己的插件。一些使用案例包括检查拼写修复排版确保文本可读性

目录

这是什么?

通过这个项目和插件,你可以将简单的标点符号:

He said, "A 'simple' english sentence. . .

…转换为智能标点:

He said, "A 'simple' english sentence…"
显示示例代码
import retextLatin from 'retext-latin'
import retextSmartyPants from 'retext-smartypants'
import retextStringify from 'retext-stringify'
import {unified} from 'unified'

const file = await unified()
  .use(retextLatin)
  .use(retextSmartyPants)
  .use(retextStringify)
  .process("He said, \"A 'simple' english sentence. . .")

console.log(String(file))

通过另一个插件,你可以检查自然语言:

输入

Where can I find an ATM machine?

输出

1:21-1:32 warning Unexpected redundant `ATM machine`, expected `ATM` atm retext-redundant-acronyms

⚠ 1 warning
显示示例代码
import retextEnglish from 'retext-english'
import retextRedundantAcronyms from 'retext-redundant-acronyms'
import retextStringify from 'retext-stringify'
import {unified} from 'unified'
import {reporter} from 'vfile-reporter'

const file = await unified()
  .use(retextEnglish)
  .use(retextRedundantAcronyms)
  .use(retextStringify)
  .process('Where can I find an ATM machine?')

console.log(reporter(file))

…你还可以创建自己的插件。

retext 可以用于许多不同的用途。unified 是使用 AST 转换内容的核心项目。retext 为 unified 添加了对自然语言的支持。nlcst 是 retext 使用的自然语言 AST。

这个 GitHub 仓库是一个 monorepo,包含以下包:

我什么时候应该使用它?

如果你的内容是英语(或荷兰语),建议使用 unifiedretext-english(或 retext-dutch)以及 retext-stringify。否则,如果你的内容是其他拉丁文字语言,请使用 retext

插件

retext 插件处理自然语言。你可以从众多现有插件中选择。以下是三种寻找插件的好方法:

一些插件由我们在 @retextjs 组织中维护,而其他插件则由其他人维护。任何人都可以制作 retext 插件,所以在选择是否在项目中包含依赖项时,请务必仔细评估 retext 插件的质量。

类型

retext 组织和整个 unified 集体完全使用 TypeScript 进行类型标注。nlcst 的类型定义可在 @types/nlcst 中找到。

为了使 TypeScript 正常工作,为插件添加类型定义很重要。例如:

/**
 * @typedef {import('nlcst').Root} Root
 */

/**
 * @typedef Options
 *   配置(可选)。
 * @property {boolean | null | undefined} [someField]
 *   某个选项。
 */

/**
 * 我的插件。
 *
 * @param {Options | null | undefined} [options]
 *   配置(可选)。
 * @returns
 *   转换函数。
 */
export function myRetextPluginAcceptingOptions(options) {
  /**
   * @param {Root} tree
   *   树。
   * @param {VFile} file
   *   文件。
   * @returns {undefined}
   *   无返回值。
   */
  return function (tree, file) {
    // 执行操作。
  }
}

兼容性

unified 集体维护的项目与维护版本的 Node.js 兼容。

当我们发布新的主要版本时,我们会停止对不再维护的 Node.js 版本的支持。这意味着我们尽量保持当前发布线与 Node.js 16 兼容。

贡献

请查看 retextjs/.github 中的 contributing.md 以了解如何开始。查看 support.md 以获取帮助的方法。

本项目有行为准则。通过与此仓库、组织或社区互动,你同意遵守其条款。

有关如何提交安全报告的信息,请参阅我们的安全政策

赞助

通过在 OpenCollective 上赞助来支持这项工作并回馈社区!

许可证

MIT © Titus Wormer

项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号