Project Icon

clp

开源日志处理工具支持高效压缩和无解压搜索

CLP是一个开源的日志处理工具,支持JSON和非结构化日志的高效压缩和无解压搜索。该项目提供实时日志压缩功能,集成多种日志库,并包含Web界面用于搜索和查看压缩日志。CLP采用无索引设计,在压缩比和搜索性能方面表现出色,提供包括压缩、搜索、分析和查看在内的完整日志管理功能。

logging-flume - 分布式大规模日志收集与传输系统
Apache FlumeGithub分布式系统开源软件开源项目数据聚合日志收集
Apache Flume是一个专门用于大规模日志数据收集、聚合和传输的分布式系统。它采用基于流数据的架构,具有简单灵活、可靠高效的特点。Flume提供强大的容错能力和可调节的可靠性机制,支持集中管理和智能动态管理。其简单可扩展的数据模型支持在线分析应用。作为Apache软件基金会项目,Flume拥有完善的文档和活跃的社区支持。
loghub - 系统日志数据集资源库 促进AI日志分析研究
AI分析GithubLoghub开源项目日志数据集系统日志
Loghub汇集了多个领域的原始系统日志数据集,包括分布式系统、超级计算机和操作系统等。这些未经处理的数据集保留了原始特征,为AI日志分析研究提供了重要资源。项目已获得450多个学术和工业组织的使用,并提供数据集下载和相关研究论文引用,全面支持日志分析研究。
explore-logs - Loki日志的直观浏览工具
Explore LogsGithubGrafanaLoki可视化开源项目日志浏览
Explore Logs是一款简化Loki日志浏览的工具,无需编写复杂查询。它通过数据量和文本模式优化搜索,几次点击即可分析相关日志和模式。该工具支持快速查找和过滤服务日志,并根据数据特征自动选择最佳可视化方式。Explore Logs目前处于积极开发的预览阶段,未来可能会有重大更新。
plumber - 消息系统调试与数据流管理的开源CLI工具
CLI工具GithubStreamdalplumber开源项目数据流消息系统
plumber是一个开源的CLI开发工具,专注于消息系统的调试和管理。它支持Kafka、RabbitMQ、GCP PubSub等多个平台,提供数据流查看、写入、路由和解码功能。plumber具备实时数据检查、协议转换和系统连接等特性,适用于事件驱动系统的调试。其单一二进制文件设计使安装和使用变得简单,为开发者提供了类似curl的消息系统操作方式。
lz4 - 高性能无损压缩算法 极速压缩解压
GithubLZ4压缩算法多核性能开源软件开源项目高速解压
LZ4是开源的高性能无损压缩算法,单核压缩速度超500 MB/s,可扩展至多核CPU。其解压速度极快,单核可达数GB/s。LZ4支持动态调节速度和压缩比,并提供高压缩版本LZ4_HC。它兼容字典压缩,结合Zstandard字典构建器可显著提升小文件压缩效率。LZ4以BSD 2-Clause许可证发布,适用于多种应用场景。
mtail - 高效日志数据提取与时序数据库集成工具
Githubmtail应用程序日志开源项目指标提取日志监控时间序列数据库
mtail是一款开源的日志数据提取工具,专为系统运营者设计。它能从应用程序日志中提取指标数据,并将其导出至时序数据库或分析工具,用于监控和警报。mtail通过简单的程序定义提取规则,无需修改原应用即可实现监控。支持JSON和Prometheus等多种数据格式,可与collectd、StatsD和Graphite等系统无缝集成。mtail为监控需求提供了灵活高效的解决方案,弥补了应用程序自身缺乏内部状态导出功能的空白。
liqe - 轻量高效的类Lucene查询语言解析和搜索工具
GithubJSON文档Liqe开源项目搜索引擎查询语言解析器
Liqe是一个轻量高效的类Lucene查询语言(LQL)工具,提供了强大的解析、序列化和搜索功能。它支持复杂查询语法,包括关键词匹配、数值比较、范围搜索、通配符匹配和布尔运算。Liqe能够解析查询、序列化结果,并对JSON文档执行搜索。作为JavaScript生态中较为完整的类Lucene实现,Liqe为命令行和Web应用提供了灵活的高级搜索能力。
clace - 多语言Web应用一站式开发部署和管理平台
ClaceGithubGit集成OAuth认证Web应用部署容器化应用开源项目
Clace是一个开源的Web应用开发和部署平台,主要用于内部工具。该平台支持在单一机器上安全托管多个Web应用,适用于各种编程语言和框架。Clace具有跨平台兼容性,整合了反向代理、微框架和容器编排功能,可直接从GitHub仓库一键安装应用。平台支持容器化应用管理、Hypermedia应用开发和混合模式应用构建,为开发者提供了灵活高效的应用部署和管理方案。
parseable - 云原生日志分析平台 专注性能和资源效率
GithubParseable云原生开源项目性能优化数据存储日志分析
Parseable是一款云原生日志分析平台,专注提升性能和资源效率。该平台采用Rust语言开发,相比传统系统能显著降低CPU和内存消耗。Parseable提供单一二进制文件部署方式,支持Apache Arrow和Parquet格式存储,让用户完全掌控数据。此外,Parseable还配备多项企业级功能,包括高可用性、集群模式、OpenTelemetry集成、告警机制和基于角色的访问控制等。该平台特别适合需要安全合规存储和实时分析日志数据的组织使用。
whylogs - 开源数据日志库 追踪分析数据变化与质量
GithubWhyLabswhylogs开源项目数据日志数据概要机器学习监控
whylogs是一款开源数据日志库,可生成数据集摘要(whylogs profiles)。它能追踪数据变化、设置约束条件、快速可视化关键统计信息。whylogs profiles具有高效、可定制、可合并的特点,支持多种数据类型。该库集成了AWS S3、Apache Airflow等工具,可用于数据漂移检测、质量验证和探索性分析等任务,为数据科学家和工程师提供有力支持。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号