Project Icon

Photon

高性能OSINT网络爬虫工具

Photon是一款开源的高性能网络爬虫工具,专为开源情报(OSINT)设计。它能够从网页中提取URL、参数、电子邮件、社交媒体账号等多种信息,具有强大的数据提取能力。Photon提供灵活的配置选项和智能的线程管理,支持插件扩展,可通过Docker轻松部署,并具备无缝更新功能。作为一个功能丰富的网络爬虫解决方案,Photon在性能和可定制性方面表现卓越。

firecrawl - 全面的网站抓取与数据提取API服务
APIFirecrawlGithubMarkdown开源项目热门结构化数据网站爬取
Firecrawl提供强大的网页抓取和数据提取功能,可将任何网站内容转换为整洁的Markdown或结构化数据。无需站点地图,支持API服务和本地部署,且拥有广泛的集成选项,包括Python和Node SDK。适用于开发者和企业,帮助用户高效地管理和利用网络数据。
infoooze - 开源情报收集工具 多功能信息搜索平台
GithubInfooozeOSINT信息收集命令行工具开源情报开源项目
Infoooze是一款多功能开源情报工具,支持社交平台侦察、网站扫描等功能。全局包使用方便,自动保存结果,兼容多平台。适合需要快速收集公开信息的用户。
API-s-for-OSINT - OSINT任务自动化API资源库
APIGithubOSINT信息收集开源项目网络安全自动化
API-s-for-OSINT汇集了多种用于自动化OSINT任务的API。涵盖IP搜索、电话验证、地址查找、人员核实、企业调查、域名分析等领域。项目旨在提高情报收集效率,为OSINT专业人士提供丰富API资源。通过这些接口可实现各类OSINT工作自动化,加快信息获取速度。
flyscrape - 高效精准的开源网页数据采集工具
GithubJavaScriptflyscrape命令行工具开源项目数据提取网页抓取
flyscrape是一款开源的命令行网页数据采集工具,专为非专业程序员设计。它提供jQuery风格的数据提取、JavaScript脚本支持、系统cookie访问和浏览器模式渲染等功能。作为单一可执行文件,flyscrape配置简便,可精准提取网站数据。此外,它还支持多URL采集、分页跟踪和代理设置等高级特性,是一款兼具简易性和功能性的网页数据采集解决方案。
PhantomBuster - 自动化数据采集和外联工具 提升营销效率
AI工具PhantomBuster外展营销数据采集自动化销售线索生成
PhantomBuster提供100多个自动化功能,用于数据采集和外联。该工具可从多个网站提取潜在客户信息、丰富数据并发送外联消息,无需编码即可使用。它可节省大量重复性工作时间,加速企业增长。目前已有超10万家企业使用PhantomBuster实现营销自动化。
Osintgram - 开源Instagram情报收集与分析工具
GithubInstagramOSINTOsintgram信息收集命令行工具开源项目
Osintgram是一款开源的Instagram情报收集工具,提供交互式命令行界面,用于获取公开账号的关注者、帖子、评论等信息。该工具基于Python开发,支持Docker部署,可用于教育和研究目的。Osintgram通过多种命令实现数据收集和分析,为Instagram用户信息获取提供了便捷途径。
spyglass - 个性化搜索引擎 实现快速精准信息检索
GithubSpyglass个人搜索引擎内容索引开源项目网页爬取隐私保护
Spyglass作为一款创新个人搜索引擎,允许自定义索引内容,通过简洁界面快速访问。支持索引本地文档、互联网主题、Google日历和GitHub仓库等多种数据源,有效突破传统搜索限制。该工具在本地设备运行,保障数据隐私,同时提供强大搜索功能,便于构建个人专属信息库。
NetSoc_OSINT - 免账号API的多平台社交媒体OSINT工具
GithubNetSoc_OSINTOSINT信息收集开源项目用户数据社交媒体
NetSoc_OSINT是一款专注于社交媒体信息收集的开源情报工具。无需社交账号和API,也不受查询次数限制,可提取Instagram、TikTok、Twitter等多个平台的用户信息。该工具安装简便、支持多语言,适合进行网络调查和信息收集。
awesome-web-scraper - 多语言网页抓取与爬虫工具资源汇总
GithubWeb Scraper开源工具开源项目数据抓取编程语言网络爬虫
awesome-web-scraper项目汇集了多种编程语言的网页抓取和爬虫工具,涵盖Java、C/C++、C#、Erlang、Python、PHP、Node.js、Ruby、Go和Rust等语言。该项目提供每个工具的简要说明和GitHub链接,便于开发者快速选择适合的解决方案。这些工具可用于网页数据抓取、内容提取和网站爬取,适用于搜索引擎构建、数据分析和自动化测试等场景。作为一个精选资源列表,awesome-web-scraper为开发者提供了宝贵的参考。
ThePhish - 基于开源框架的智能钓鱼邮件分析系统
CortexGithubTheHiveThePhish开源项目自动化钓鱼邮件分析
该系统是一个基于TheHive、Cortex和MISP的智能钓鱼邮件分析系统。采用Python 3开发,提供Web界面,可自动完成从提取邮件中的可观察对象到生成分析结论的全过程。分析人员可根据需要介入并获取更多细节。系统通过TheHive4py和Cortex4py与TheHive和Cortex交互,调用它们的REST API实现核心功能。它具有良好的可扩展性,支持分析人员手动干预以及与其他开源安全平台的集成,为安全团队提供了一个高效实用的钓鱼邮件分析解决方案。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

白日梦AI

白日梦AI提供专注于AI视频生成的多样化功能,包括文生视频、动态画面和形象生成等,帮助用户快速上手,创造专业级内容。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

讯飞绘镜

讯飞绘镜是一个支持从创意到完整视频创作的智能平台,用户可以快速生成视频素材并创作独特的音乐视频和故事。平台提供多样化的主题和精选作品,帮助用户探索创意灵感。

Project Cover

讯飞文书

讯飞文书依托讯飞星火大模型,为文书写作者提供从素材筹备到稿件撰写及审稿的全程支持。通过录音智记和以稿写稿等功能,满足事务性工作的高频需求,帮助撰稿人节省精力,提高效率,优化工作与生活。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号