Project Icon

ip2region

快速精准的IP地址定位与管理解决方案

ip2region是一款开源的离线IP地址定位库和数据管理框架,具有10微秒级查询效率。该项目支持亿级IP数据段处理,提供数据去重、压缩和自定义region信息功能。ip2region兼容多种主流编程语言,并提供查询客户端和数据生成工具,便于开发者快速集成。其高效的查询性能和灵活的数据管理特性使其适用于各类IP定位场景。

Ip2region 是什么

Ip2region 是一个离线IP地址定位库和IP定位数据管理框架,查询效率达到微秒级别,为众多主流编程语言提供了 xdb 数据生成和查询客户端实现。

Ip2region 特性

1、IP 数据管理框架

xdb 支持亿级别的 IP 数据段行数,默认的 region 信息格式固定为:国家|区域|省份|城市|ISP,缺失的地域信息默认为0。 region 信息支持完全自定义,例如:你可以在 region 中添加特定业务需求的数据,如GPS信息、国际统一地域信息编码、邮编等。这意味着你可以完全利用 ip2region 来管理自己的 IP 定位数据。

2、数据去重和压缩

xdb 格式生成程序会自动去重和压缩部分数据,默认的全部 IP 数据生成的 ip2region.xdb 数据库大小为 11MiB,随着数据详细度的增加,数据库大小也会逐渐增大。

3、极速查询响应

即使是完全基于 xdb 文件的查询,单次查询响应时间也在十微秒级别,可通过以下两种方式开启内存加速查询:

  1. vIndex 索引缓存:使用固定的 512KiB 内存空间缓存 vector index 数据,减少一次 IO 磁盘操作,保持平均查询效率稳定在10-20微秒之间。
  2. xdb 整个文件缓存:将整个 xdb 文件全部加载到内存,内存占用等同于 xdb 文件大小,无磁盘 IO 操作,保持微秒级别的查询效率。

xdb 数据查询

API 介绍、使用文档和测试程序请参考对应 searcher 查询客户端下的 ReadMe 介绍,全部查询 binding 实现情况如下:

完成情况状态编程语言描述贡献者
:white_check_mark:已完成golanggolang xdb 查询客户端实现Lion
:white_check_mark:已完成phpphp xdb 查询客户端实现Lion
:white_check_mark:已完成javajava xdb 查询客户端实现Lion
:white_check_mark:已完成lua纯 lua xdb 查询客户端实现Lion
:white_check_mark:已完成cANSC c xdb 查询客户端实现Lion
:white_check_mark:已完成lua_clua c 扩展 xdb 查询客户端实现Lion
:white_check_mark:已完成rustrust xdb 查询客户端实现gongzhengyang
:white_check_mark:已完成pythonpython xdb 查询客户端实现厉害的花花
:white_check_mark:已完成nodejsnodejs xdb 查询客户端实现Wu Jian Ping
:white_check_mark:已完成csharpcsharp xdb 查询客户端实现Alen Lee
:white_check_mark:已完成erlangerlang xdb 查询客户端实现leihua996
   待开始php_extphp c 扩展 xdb 查询客户端实现待确定
:white_check_mark:已完成nginxnginx 扩展 xdb 查询客户端实现Wu Jian Ping
:white_check_mark:已完成C++C++ xdb 查询客户端实现Yunbin Liu

以下工具链实现由社区开发者通过第三方仓库贡献:

完成情况状态编程语言描述贡献者
:white_check_mark:已完成ruby-ip2regionruby xdb 查询客户端实现jicheng1014
:white_check_mark:已完成Ip2regionToolip2region数据转换工具orestonce

xdb 数据生成

API 介绍、使用文档和测试程序请参考如下 maker 生成程序下的 ReadMe 文档:

完成情况状态编程语言描述贡献者
:white_check_mark:已完成golanggolang xdb 生成程序实现Lion
:white_check_mark:已完成javajava xdb 生成程序实现Lion
   待开始cANSC c xdb 生成程序实现Lion
:white_check_mark:已完成pythonpython xdb 生成程序实现leolin49
:white_check_mark:已完成csharpcsharp xdb 生成程序实现Alan Lee
:white_check_mark:已完成rustrust xdb 生成程序实现KevinWang
:white_check_mark:已完成C++C++ xdb 生成程序实现Yunbin Liu

xdb 数据更新

ip2region 旨在研究 IP 数据的存储和快速查询的设计和实现,并没有原始 IP 数据的支撑,也不会有商用版本。 本项目自带的 ./data/ip.merge.txt 原始数据已经很久没有更新,也不会再更新。对于数据精度和更新频率要求很高的使用场景,建议购买第三方商用数据。你可以使用如下几种方式来尝试自己更新数据:

手动编辑更新

你可以基于 ip2region 自带的 ./data/ip.merge.txt 原始 IP 数据,使用 ip2region 提供的编辑工具来自行修改。目前数据源有如下几种方式:

  1. ip2region 社区提供的数据(请参考页面底部的公众号关注社区通知)
  2. ip2region Github/Gitee 中带有 [数据源补充] 标签的 Issue
  3. 其他自定义数据:例如客户提供的数据,或者通过 GPS 和 WIFI 定位得到的数据,或者来自其他平台的合法合规的数据

原始 IP 数据编辑工具使用方法请参考如下的 maker 生成程序下的 ReadMe 文档:

是否完成状态编程语言描述贡献者
:white_check_mark:已完成golanggolang 原始 IP 数据编辑器Lion
   待开始javajava 原始 IP 数据编辑器Lion
:white_check_mark:已完成C++C++ 原始 IP 数据编辑器Yunbin Liu

检测自动更新

如果你想通过自己的 API 或数据源来更新数据,你可以参考以下视频分享的 基于检测算法 的更新算法来自己编写一个更新程序:

  1. 数据更新实现视频分享 - part1
  2. 数据更新实现视频分享 - part2

相关备注

1、并发查询必读

xdb 整个缓存的查询都并发安全的,基于文件的查询都不是并发安全的实现。不同进程/线程/协程需要通过创建不同的查询对象来安全使用。在并发量很大的情况下,基于文件查询的方式可能会导致打开文件数过多的错误,请修改内核的最大允许打开文件数(fs.file-max=一个更高的值),或者将整个xdb加载到内存进行安全并发使用。

2、技术资源分享

  1. xdb 数据结构分析:"ip2region xdb 数据结构和查询过程详解"
  2. xdb 查询过程分析:"ip2region xdb 数据结构和查询过程详解"
  3. xdb 生成过程分析:"ip2region xdb 二进制数据生成过程详解"
  4. xdb 数据更新方法:"ip2region 数据更新和 xdb 数据编辑器的使用"

3、技术信息博客

请先关注微信公众号 lionsoul-org (狮子的魂)

项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号