Project Icon

Photon

高性能OSINT网络爬虫工具

Photon是一款开源的高性能网络爬虫工具,专为开源情报(OSINT)设计。它能够从网页中提取URL、参数、电子邮件、社交媒体账号等多种信息,具有强大的数据提取能力。Photon提供灵活的配置选项和智能的线程管理,支持插件扩展,可通过Docker轻松部署,并具备无缝更新功能。作为一个功能丰富的网络爬虫解决方案,Photon在性能和可定制性方面表现卓越。

phospho - 用于 LLM 应用程序的文本分析平台
GithubLLM应用phospho开源项目数据可视化文本分析自动评估
Phospho 是为LLM应用设计的文本分析平台,提供灵活的日志记录、自动评估、洞察提取和数据可视化等功能,帮助开发者发现问题和提取用户反馈,从而评估应用的效果。借助phospho,开发者可以安心地在生产环境中部署LLM应用,并通过用户反馈不断优化对话体验。该平台支持Python和JavaScript客户端,方便快速集成和自动处理批量信息事件。用户还可以在注册托管版本后,在协作平台上管理phospho实验室的评估工作。
holehe - 高效检测邮箱注册账号的开源OSINT工具
GithubHoleheOSINTPython工具开源项目账户检测邮箱验证
Holehe是一款开源OSINT工具,能够检测邮箱在120多个网站上的注册情况。通过忘记密码功能获取信息,不会触发目标邮箱警报。使用Python 3开发,支持命令行和Python集成,可获取账号存在、恢复邮箱和电话等信息。适用于网络安全、调查和开发领域的信息收集工作。
Bytebot - 网页数据抓取和自动化的智能解决方案
AI工具AI自动化Bytebot工作流程数据提取网页抓取
Bytebot简化了网页数据抓取和自动化流程。该工具支持通过URL和简单指令完成数据提取,无需复杂配置。其可视化界面便于创建工作流程,并可导出为脚本。Bytebot的智能缓存和会话检查功能增强了数据抓取效率。工具适用于多种场景,为不同规模的用户提供灵活的价格选择和技术支持。
prowler - 多云环境安全评估与合规审计工具
GithubProwler云安全合规性检查安全评估开源工具开源项目
Prowler是一款开源安全工具,专门用于AWS、Azure、Google Cloud和Kubernetes环境的安全评估和合规审计。它提供数百项控制措施,覆盖CIS、NIST、PCI-DSS等多个合规框架,支持最佳实践评估、事件响应、持续监控和安全加固。Prowler提供命令行界面和SaaS服务,可在多种环境中灵活部署,适用于各类企业的云安全需求。
colly - 快速灵活的Go语言网络爬虫框架
CollyGithubGo语言Web抓取开源项目数据抓取网络爬虫
Colly是一个Go语言开发的网络爬虫框架,以其快速和简洁的API接口著称。该框架支持同步、异步和并行爬取,能自动处理cookie和会话管理。Colly具备缓存和分布式爬取等高级特性,单核处理能力可达每秒1000多个请求。它适用于数据挖掘、处理和归档等多种场景,兼具易用性和高性能,为开发者提供了构建网络爬虫的有力工具。
homeproxy - 多节点管理和性能优化的开源代理工具
ACL设置Clash选择器GithubNFT规则开源项目性能优化订阅页面
homeproxy是一个开源代理工具项目,正在进行多方面优化。开发计划包括提升大量节点时的订阅页面响应速度,重构NFT规则,增加对Clash选择器和urltest的支持,以及将ACL设置独立到专门页面。这些改进旨在提高性能、优化配置流程并扩展功能,使homeproxy更适应复杂的网络代理需求。项目还计划进行其他方面的改进,以不断完善功能和用户体验。
Eyes - 基于邮箱的多平台账户搜索开源工具
EyesGithubOSINT工具人脸识别开源项目异步爬虫邮箱账号查找
Eyes是一款开源情报工具,可通过邮箱地址在多个平台搜索现有账户。该工具采用异步技术提高爬取效率,支持Bitmoji、Duolingo、GitHub等多个社交媒体和服务模块。Eyes还集成了人脸识别功能,可分析GitHub等平台的用户头像。这款工具操作简单,主要用于教育目的,不建议滥用。
metasearch - 高效多源并行搜索工具 实现信息检索效率提升
DockerGithubMetasearch开源项目搜索工具数据源
Metasearch是一个开源的多源并行搜索工具,支持同时检索超过25种数据源,包括AWS、GitHub、Google Drive、Confluence、Jira和Slack等。此工具能显著提高信息检索效率,适合企业内部资源管理。Metasearch支持Docker和Git部署,设置简便,并欢迎社区贡献新的数据源支持。它为企业提供了一个统一的平台,用于快速搜索和访问分散在各种工具和平台上的信息。作为一个轻量级工具,Metasearch仅由约3000行TypeScript代码构成,具有出色的扩展性。
AutoCrawler - 高效多进程图片爬虫工具
AutoCrawlerGithubGoogleNaver图像爬虫多线程开源项目
AutoCrawler是一个多进程图片爬取工具,支持从Google和Naver高效获取高质量图片,且可根据需求自定义参数。用户需安装Chrome浏览器,设置搜索关键词并运行主程序,下载的图片将存储在指定目录。项目功能包括全分辨率下载、数据不平衡检测和SSH远程爬取,并允许通过修改脚本进行个性化定制。提供详细的使用说明,适合需要批量下载高质量图片的用户。
sonic - 快速轻量的开源搜索后端
GithubSonic全文索引开源项目性能优化搜索后端
Sonic是一个开源的搜索后端,具有快速、轻量和无模式等特点。它可以在微秒级时间内处理搜索请求,支持自然语言查询处理和搜索建议功能。相比Elasticsearch等全功能搜索引擎,Sonic提供了一种简单高效的替代方案。该项目重视性能优化和代码质量,致力于提供稳定、快速且资源占用少的搜索服务。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

白日梦AI

白日梦AI提供专注于AI视频生成的多样化功能,包括文生视频、动态画面和形象生成等,帮助用户快速上手,创造专业级内容。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

讯飞绘镜

讯飞绘镜是一个支持从创意到完整视频创作的智能平台,用户可以快速生成视频素材并创作独特的音乐视频和故事。平台提供多样化的主题和精选作品,帮助用户探索创意灵感。

Project Cover

讯飞文书

讯飞文书依托讯飞星火大模型,为文书写作者提供从素材筹备到稿件撰写及审稿的全程支持。通过录音智记和以稿写稿等功能,满足事务性工作的高频需求,帮助撰稿人节省精力,提高效率,优化工作与生活。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号