Project Icon

cs

多功能命令行代码搜索工具

codespelunker (cs) 是一款开源的命令行代码搜索工具,支持在当前目录下搜索代码或文本文件。该工具提供控制台、TUI和HTTP服务器三种界面,可使用布尔查询和正则表达式进行搜索。cs无需建立索引,采用BM25算法进行实时结果排序,支持跨行搜索和智能代码片段生成。作为ripgrep和fzf功能的结合,cs为开发者提供了高效的多平台代码搜索解决方案。

codespelunker (cs)

一个命令行搜索工具。允许您在当前目录下搜索代码或文本文件,可以通过控制台、TUI或HTTP服务器使用布尔查询或正则表达式进行搜索。

可以将其视为类似于使用ripgrep、silver searcher或grep结合fzf的方法,但集成在单个工具中。

采用MIT或UNLICENSE双重许可。

Go报告卡 覆盖率状态 Cs 代码行数徽章

asciicast

支持

商业使用cs?如果您需要cs的优先支持,可以购买一年的支持服务 https://boyter.gumroad.com/l/vvmyi ,这将使您有权获得开发者的优先直接电子邮件支持。

特点

为什么使用cs?

  • 速度相当快
  • 实时对结果进行排序,帮助您找到所需内容
  • 可跨多行搜索
  • 具有美观的TUI界面
  • 跨平台(可能需要新的Windows终端)

cs存在的原因是因为我在使用rg TERM | fzf时遇到了限制,于是决定解决自己的问题。

安装

如果您想创建安装包,请尽管去做。告诉我,我会确保在这里添加相关信息。

Go Get

如果您安装了Go >= 1.20

go install github.com/boyter/cs@v1.3.0

Nixos

nix-shell -p codespelunker

https://github.com/NixOS/nixpkg/pull/236073

手动安装

Windows、GNU/Linux和macOS的二进制文件可从releases页面获取。

常见问题

这个工具速度是否和...一样快?

不是。

你没让我说完,我想问它是否和...一样快?

答案可能是否定的。它不能直接比较。据我所知,除了全文索引工具(如hound、searchcode、sourcegraph等)外,没有其他工具像这样工作。没有工具能像这样实时工作。

虽然cs与ripgrep、grep、ack或silver searcher等工具有一些重叠,但实际上它的工作方式不同,所以任何比较都是毫无意义的。它比它们中的大多数都慢,但它也在做不同的事情。

如果你想进行一个有缺陷的比较,可以尝试将它们的输出通过管道传递给fzf。

在我的本地机器上(写作时是Macbook Air M1),它可以在约2.5秒内搜索最近checkout的Linux源代码。虽然绝对性能不是设计目标,但我也不希望这是一个缓慢的工具。因此,如果有任何明显的性能提升机会,我都会采纳。

它能在普通文档上工作吗?

只要是文本文件就可以。我写它是为了搜索代码,但它对全文文档也同样有效。例如,我在《傲慢与偏见》上测试了片段提取功能。如果你有大量PDF文件,你可以用shell脚本配合pdftotext来创建可搜索的内容。

请注意,它是为代码设计的,因此完全支持.ignore和.gitignore文件。

索引在哪里?

没有索引。所有计算都是实时暴力进行的。对于TUI模式,采用了一些结果缓存的快捷方式来提高速度。

那么排名是如何工作的?

标准BM25或TF/IDF,或者Lucene中修改的TF/IDF https://opensourceconnections.com/blog/2015/10/16/bm25-the-next-generation-of-lucene-relevation/ ,它减弱了词频的影响。

从技术上讲,它并不准确,因为它是根据匹配到的内容而不是所有内容来计算权重的,但在实践中效果足够好,而且是实时计算的。试试看,如果有什么不符合你预期的,请反馈!

你是如何获取片段的?

这不是一件容易的事... https://github.com/boyter/cs/blob/master/snippet.go 看看代码吧。

它的工作原理是传递要提取片段的文档内容和每个词的所有匹配位置。然后它遍历每个词的每个位置,检查两侧寻找附近的词。接着它根据我们正在检查的词的词频进行排名,并对更罕见的词给予奖励。它还奖励更多匹配、更近的匹配、精确大小写匹配和完整单词匹配。

更多信息请阅读这篇博文的"Snippet Extraction AKA I am PHP developer"部分 https://boyter.org/posts/abusing-aws-to-make-a-search-engine/

HTTP模式看起来是什么样的?

它有点简陋。

<img alt="scc" src=https://github.com/boyter/cs/raw/master/cs_http.png>

你可以使用--template-display--template-search来改变它的外观和感觉。查看 https://github.com/boyter/cs/tree/master/asset/templates 获取可用于修改的示例模板。

cs -d --template-display ./asset/templates/display.tmpl --template-search ./asset/templates/search.tmpl

使用方法

cs的命令行使用设计得尽可能简单。 完整详情可以在cs --helpcs -h中找到。请注意,以下内容反映的是master分支的状态,而不是发布版本,因此下面列出的功能可能在你的安装版本中缺失。

$ cs -h
代码探索器 (cs) 代码搜索。
版本 1.3.0
Ben Boyter <ben@boyter.org>

cs 使用一些布尔逻辑递归搜索当前目录,
可选择与正则表达式结合使用。

可通过命令行工作,将传入的参数作为搜索词,
或在无参数时以 TUI 模式运行。也可以使用
-d 或 --http-server 标志在 HTTP 模式下运行。

默认搜索对所有术语使用 AND 布尔语法
 - 使用引号进行精确匹配 "查找这个"
 - 在 1 或 2 的距离内进行模糊匹配 fuzzy~1 fuzzy~2
 - 使用 NOT 进行否定,如 pride NOT prejudice
 - 使用牙签语法进行正则表达式 /pr[e-i]de/

通过添加以下语法可以模糊匹配要搜索的文件

 - test file:test
 - stuff filename:.go

搜索的文件将限制为第一个示例中模糊匹配 test 的文件,
第二个示例中匹配 .go 的文件。
使用所有当前功能的示例搜索
 - darcy NOT collins wickham~1 "ten thousand a year" /pr[e-i]de/ file:test

TUI 模式下的默认输入字段支持一些 nano 命令
- CTRL+a 移动到输入的开头
- CTRL+e 移动到输入的末尾
- CTRL+k 从光标位置向前清除

用法:
  cs [标志]

标志:
      --address string            HTTP 模式下监听的地址和端口 (默认 ":8080")
      --binary                    设置以禁用二进制文件检测并搜索二进制文件
  -c, --case-sensitive            使搜索区分大小写
      --dir string                要搜索的目录,如果未设置则默认为当前工作目录
      --exclude-dir strings       要排除的目录 (默认 [.git,.hg,.svn])
  -x, --exclude-pattern strings   匹配区分大小写模式的文件和目录位置将被忽略 [逗号分隔列表:例如 vendor,_test.go]
  -r, --find-root                 尝试通过反向遍历查找 .git 或 .hg 来找到此存储库的根目录
  -f, --format string             设置输出格式 [text, json, vimgrep] (默认 "text")
  -h, --help                      cs 的帮助
      --hidden                    包括隐藏文件
  -d, --http-server               启动搜索的 http 服务器
  -i, --include-ext strings       限制文件扩展名(注意:区分大小写)[逗号分隔列表:例如 go,java,js,C,cpp]
      --max-read-size-bytes int   读入文件的字节数,忽略剩余内容 (默认 1000000)
      --min                       包括压缩文件
      --min-line-length int       文件被视为压缩文件的平均行字节数 (默认 255)
      --no-gitignore              禁用 .gitignore 文件逻辑
      --no-ignore                 禁用 .ignore 文件逻辑
  -o, --output string             输出文件名(默认标准输出)
      --ranker string             设置排名算法 [simple, tfidf, tfidf2, bm25] (默认 "bm25")
  -s, --snippet-count int         显示的片段数量 (默认 1)
  -n, --snippet-length int        显示的片段大小 (默认 300)
      --template-display string   自定义样式的显示模板路径
      --template-search string    自定义样式的搜索模板路径
  -v, --version                   cs 的版本

搜索可以在单个或多个词上进行,它们之间应用逻辑 AND。您可以在术语前使用 NOT 进行否定。 您可以使用引号进行精确匹配,并使用牙签进行正则表达式。

使用所有当前功能的示例搜索

cs t NOT something test~1 "ten thousand a year" "/pr[e-i]de/" file:test

如果您喜欢,可以在 TUI 模式下以类似于 fzf 的方式使用它,因为如果您按回车键,cs 将返回匹配的文档路径。

cat `cs`
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

稿定AI

稿定设计 是一个多功能的在线设计和创意平台,提供广泛的设计工具和资源,以满足不同用户的需求。从专业的图形设计师到普通用户,无论是进行图片处理、智能抠图、H5页面制作还是视频剪辑,稿定设计都能提供简单、高效的解决方案。该平台以其用户友好的界面和强大的功能集合,帮助用户轻松实现创意设计。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号