Project Icon

Photon

高性能OSINT网络爬虫工具

Photon是一款开源的高性能网络爬虫工具,专为开源情报(OSINT)设计。它能够从网页中提取URL、参数、电子邮件、社交媒体账号等多种信息,具有强大的数据提取能力。Photon提供灵活的配置选项和智能的线程管理,支持插件扩展,可通过Docker轻松部署,并具备无缝更新功能。作为一个功能丰富的网络爬虫解决方案,Photon在性能和可定制性方面表现卓越。

SiteBroker - 跨平台Python网站信息收集与渗透测试工具
GithubPython工具SiteBroker信息收集开源项目渗透测试网络安全
SiteBroker是一款Python开发的跨平台信息收集和渗透测试工具。它集成了Cloudflare检测、网站爬虫、反向IP查询、WHOIS查询、DNS检查、网站性能测试、子域名扫描等功能。该工具支持Docker部署,兼容Windows和Kali Linux系统,为网络安全分析提供自动化解决方案。
UseScraper - 高性能网络爬虫与数据采集API平台
AI工具APIJavaScript渲染数据提取网站爬虫网页抓取
UseScraper是一款高性能网络爬虫和数据采集API平台。支持快速网页抓取和整站爬取,具备JavaScript渲染功能,可输出多种格式数据。采用按量付费模式,配备自动代理和并行处理技术,有效规避速率限制。该平台适用于各类网页数据采集需求,提供高效便捷的网络数据获取解决方案。
sparrow - 用于从各种文档和图像中高效提取和处理数据的开源工具
GithubLLMOCRRAG管道Sparrow开源项目数据提取
Sparrow是一个开源解决方案,专注于高效从各类文档和图像中提取与处理数据。它通过模块化架构提供独立的服务和优化的流程,支持表格、发票、收据等非结构化数据源。Sparrow的API支持本地语言模型数据提取,可与自定义工作流程集成。
gshark - 多平台敏感信息泄露检测管理系统
GSharkGitHubGitLabGithub多平台扫描开源项目敏感信息检测
GShark是一个开源的多平台敏感信息检测管理系统,支持GitHub、GitLab、Searchcode和Postman等平台扫描。系统提供灵活的菜单和API权限设置、自定义规则和过滤机制,并具备子域名爆破功能。GShark易于部署和使用,可通过Docker快速搭建,旨在帮助用户高效发现和管理公开环境中的敏感信息泄露风险。
Awesome-FOFA - 网络安全专家的开源工具箱
APT追踪FOFAGithub信息收集开源项目网络安全资产发现
Awesome-FOFA是GitHub上的开源网络安全资源库,整合了FOFA网络空间测绘平台的使用指南和应用案例。从新手教程到高级APT追踪,涵盖资产发现、数据获取和恶意软件分析等主题。该项目还包含FOFA API工具和工作流程,为网络安全专业人员提供全面的学习和实践资源。
proxy_pool - 高效自动化的爬虫代理IP池项目
API服务DockerGithubProxyPool免费代理开源项目爬虫代理IP池
ProxyPool是一个开源爬虫代理IP池项目,自动采集、验证和管理免费代理IP。项目提供API和CLI接口,支持多种数据库,可扩展代理源。具备定时采集、自动验证等功能,提升爬虫效率和稳定性。支持多个Python版本,提供Docker部署,适合爬虫开发使用。
nmap - 开源网络探测与安全审计工具
GithubNmap命令行安全工具开源软件开源项目网络扫描
Nmap是一款广受欢迎的开源网络探测和安全审计工具,能够帮助用户识别网络中的主机、服务和潜在漏洞。它支持主流操作系统,包括Windows、macOS和Linux,并提供命令行和图形界面操作。Nmap使用自定义许可证,允许个人免费使用,同时为企业提供商业许可选项。这款工具易于上手,用户可以通过简单命令快速开始,同时也具备丰富的高级功能,适合复杂的网络安全分析需求。
crawlee - 功能强大的网页爬虫和浏览器自动化库
CrawleeGithubNode.js开源项目数据抓取浏览器自动化网络爬虫
Crawlee是一个功能丰富的网络爬虫和浏览器自动化库,适用于各种网页数据采集和自动化任务。它提供HTTP和无头浏览器爬取的统一接口,支持持久化队列、可插拔存储和自动扩展。Crawlee具有代理轮换功能,能模拟人性化的爬取行为,有效避开常见的反爬虫措施。该库易于配置和使用,可快速构建稳定高效的爬虫系统。Crawlee基于Node.js开发,支持TypeScript,并提供了完善的文档和示例,方便开发者快速上手和集成。
maxun - 无代码数据爬虫
GithubMaxun开源项目无代码机器人网页抓取网页数据提取
Maxun 是一款开源的网页数据提取平台,无需编码即可快速设置机器人,实现自动化数据抓取。支持数据列表、文本提取和网页截图等功能,还能进行计划任务和配置反爬虫。能够通过外部代理绕过反爬虫保护,并与 Google 表单集成。提供本地和云端版本,云版本支持大规模数据抓取和自动代理切换,满足不同用户需求。
BugBountyScanner - 高效低耗的自动化漏洞赏金侦察脚本
BugBountyScannerGithub侦察开源项目漏洞赏金网络安全自动化工具
BugBountyScanner是一款自动化漏洞赏金侦察工具,提供Bash脚本和Docker镜像两种使用方式。它具有资源消耗低、信息输出高的特点,支持子域名枚举、Web服务器检测、网页爬取、漏洞扫描等功能。该工具适合在低配置服务器上长期运行,并支持通过Telegram接收实时状态通知。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

白日梦AI

白日梦AI提供专注于AI视频生成的多样化功能,包括文生视频、动态画面和形象生成等,帮助用户快速上手,创造专业级内容。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

讯飞绘镜

讯飞绘镜是一个支持从创意到完整视频创作的智能平台,用户可以快速生成视频素材并创作独特的音乐视频和故事。平台提供多样化的主题和精选作品,帮助用户探索创意灵感。

Project Cover

讯飞文书

讯飞文书依托讯飞星火大模型,为文书写作者提供从素材筹备到稿件撰写及审稿的全程支持。通过录音智记和以稿写稿等功能,满足事务性工作的高频需求,帮助撰稿人节省精力,提高效率,优化工作与生活。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号