Logo
Project Icon

Photon

高性能OSINT网络爬虫工具

Photon网络爬虫数据提取开源情报DockerGithub开源项目

Photon是一款开源的高性能网络爬虫工具，专为开源情报(OSINT)设计。它能够从网页中提取URL、参数、电子邮件、社交媒体账号等多种信息，具有强大的数据提取能力。Photon提供灵活的配置选项和智能的线程管理，支持插件扩展，可通过Docker轻松部署，并具备无缝更新功能。作为一个功能丰富的网络爬虫解决方案，Photon在性能和可定制性方面表现卓越。

访问官网访问官网GithubGithub
介绍相关项目
photon - 基于OpenStreetMap的开源地理编码器 支持多语言实时搜索
GithubOpenStreetMapphoton多语言支持开源地理编码器开源项目搜索引擎
Photon是基于OpenStreetMap数据的开源地理编码器，采用Elasticsearch作为搜索平台。它具备实时搜索、多语言支持、位置偏好和容错功能，可进行正向和反向地理编码。Photon支持通过OSM标签和边界框过滤结果，并提供易用的API，便于开发者集成到地图应用中。其高性能和可扩展性使其适用于各种规模的项目。
photonix - 智能化的跨设备照片管理工具
DockerGithubPhotonix开源项目智能过滤照片管理
Photonix是一款基于Web技术的照片管理应用，适用于家庭服务器，支持多设备访问。利用对象识别、位置感知和颜色分析等算法，自动实现智能过滤。目前，项目仍在开发中，尚未达到1.0版本。如果不介意部分功能未完善或希望参与开发，可以运行Docker镜像进行体验并反馈。欢迎加入社区讨论，关注社交媒体，支持项目进展。
spiderfoot - 全面的开源情报收集和分析功能
GithubOSINTSpiderFoot开源工具开源项目情报收集网络安全
SpiderFoot是一款功能全面的开源情报(OSINT)自动化工具。它集成了200多个数据源模块,提供多种数据分析方法,便于情报数据的导航和理解。该工具具备Web界面和命令行接口,支持多种格式导出,可进行灵活定制。SpiderFoot可用于攻防两方面的情报收集,能针对IP地址、域名、子网等多种目标进行扫描,提取敏感信息,并进行威胁情报查询、社交媒体枚举等分析。它适用于红队演练、渗透测试以及防御性信息收集等场景。
spider - 快速并发的网络爬虫和索引工具
GithubSpider并发开源项目无头浏览器流式处理网络爬虫
Spider是一个开源的网络爬虫和索引工具，以其快速并发能力著称。它提供流式处理、去中心化、Headless Chrome渲染等功能，支持HTTP代理和定时任务。Spider具备智能模式、黑白名单管理、深度控制等特性，并支持动态AI提示脚本和CSS选择器抓取。这些功能使Spider成为适用于多种网络数据采集和处理场景的强大工具。
The_spy_job - 自动化OSINT工具集成多领域情报搜集功能
GitHubGithubOSINTThe_spy_jobXDeadHackerX信息收集开源项目
The_spy_job是一款综合性OSINT工具，集成了多领域的自动化信息收集功能。该工具涵盖人员、昵称、社交媒体、电子邮件、电话号码、网站、公共IP和图像等多个情报搜集方向。通过整合多种高级OSINT技术，The_spy_job能够快速获取并有序呈现信息。工具支持单项和综合搜索，可根据需求灵活使用。其简单的操作界面使得用户只需少量点击即可获得全面的情报数据。
awesome-osint - 精选OSINT工具与资源大全
GithubOSINT开源情报开源项目搜索引擎数据分析社交媒体网络调查
该项目是一个全面的开源情报(OSINT)工具和资源汇总。涵盖通用搜索、专业工具、社交媒体分析、人员调查、域名IP研究等多个领域。适用于网络威胁情报(CTI)、威胁狩猎和OSINT从业者,内容丰富详实,为初学者和专家提供全面参考。
theHarvester - 开源情报收集工具 支持红队评估和渗透测试
GithubOSINTtheHarvester信息收集子域名枚举开源项目渗透测试
theHarvester是一款开源情报(OSINT)收集工具，用于红队评估和渗透测试的侦察阶段。通过利用公共资源，它收集域名、邮箱、IP、子域名和URL信息，帮助分析目标域的外部威胁环境。该工具包含被动和主动模块，支持多种搜索引擎和安全平台。部分功能需要API密钥。theHarvester可有效评估目标的安全态势。
OSINT-Framework - 综合性开源情报收集框架
GithubOSINT Framework信息安全免费资源开源工具开源项目情报收集
OSINT Framework是一个专注于整合免费工具和资源的开源情报框架。它为用户提供了一个互动界面，便于探索各种OSINT工具和技术。虽然最初针对信息安全领域，现已扩展至多个领域，成为全面的OSINT资源集合。该框架涵盖了社交媒体分析、网络侦查、地理定位等多个OSINT应用领域，为研究人员、调查人员和安全专业人士提供了宝贵的资源。框架持续更新，涵盖广泛的信息收集领域，并鼓励社区贡献新的工具和资源。
dark-web-osint-tools - 探索深层网络情报资源
GithubOSINTTor开源项目搜索引擎暗网爬虫工具
dark-web-osint-tools项目整合了多种暗网开源情报（OSINT）工具，涵盖暗网搜索引擎、洋葱链接获取与扫描、数据爬取等功能。该资源库包含Katana、OnionSearch、TorBot等实用工具，为研究人员和网络安全专业人士提供了探索和分析暗网信息的有力支持。这些工具有助于深入挖掘暗网数据，提高情报搜集效率，为相关领域的研究和实践提供了有价值的技术支持。
katana - 下一代高效网络爬虫与数据采集框架
GithubKatanaWeb抓取开源项目爬虫框架网络安全自动化
Katana是一款基于Go语言开发的高性能网络爬虫框架,专为自动化流程设计。它支持无头和有头两种爬取模式,能够解析JavaScript、自动填充表单,并提供精确的范围控制。Katana具有多样化的输入输出选项,高度可配置,适用于各类网络数据采集任务。其灵活架构使其成为执行复杂爬取任务的理想工具。
相关项目
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手，通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能，支持100+编程语言，与主流编辑器无缝集成，显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台，能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐，Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

白日梦AI

白日梦AI提供专注于AI视频生成的多样化功能，包括文生视频、动态画面和形象生成等，帮助用户快速上手，创造专业级内容。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案，通过智能技术简化视频制作流程。无论是企业宣传还是个人分享，有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持，能够阅读和理解用户上传的文件内容，解析网页信息，并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题，Kimi都能以友好、专业的方式提供帮助。

Project Cover

讯飞绘镜

讯飞绘镜是一个支持从创意到完整视频创作的智能平台，用户可以快速生成视频素材并创作独特的音乐视频和故事。平台提供多样化的主题和精选作品，帮助用户探索创意灵感。

Project Cover

讯飞文书

讯飞文书依托讯飞星火大模型，为文书写作者提供从素材筹备到稿件撰写及审稿的全程支持。通过录音智记和以稿写稿等功能，满足事务性工作的高频需求，帮助撰稿人节省精力，提高效率，优化工作与生活。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术，为商家提供一键生成商品图和营销文案的服务，显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台，让商品第一时间被种草。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具，简化了选题、文献检索至论文撰写的整个过程。通过简单设定，平台可快速生成高质量论文大纲和全文，配合图表、参考文献等一应俱全，同时提供开题报告和答辩PPT等增值服务，保障数据安全，有效提升写作效率和论文质量。

使用协议隐私政策广告服务
投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号