You need to enable JavaScript to run this app.
导航
产品功能
最近更新时间:2024.01.31 10:25:53首次发布时间:2021.10.11 18:04:05

本文介绍日志服务的主要功能。

数据采集

日志服务提供了 LogCollector、API、SDK 、开源组件及云产品导入等多种灵活的数据采集方式,支持接入数十种数据源。

  • 支持通过 LogCollector 采集宿主机文本日志、容器文本日志、容器标准输出等日志。
  • 支持接入火山引擎云产品日志(TOS、CDN 等)。
  • 支持从 Kafka、TOS、SLS、Elasticsearch 等渠道导入数据。
  • 支持采集移动端数据。

数据存储

日志服务提供了高效、可靠的数据存储解决方案。

  • 支持数据低频存储,降低数据长期存储的成本。
  • 支持海量数据持久化存储,性能稳定、读写便捷。

数据检索与分析

日志服务提供了强大的数据检索与分析功能,便于您查询统计海量日志。

  • 支持秒级查询百亿级数据。
  • 支持标准的 SQL92 语法。
  • 支持精确查询、模糊查询、全文查询、字段查询、短语查询等多种查询方式。
  • 支持快速分析、上下文查询、下载日志、重建索引等功能。

可视化

日志服务提供了丰富的可视化图表和交互式仪表盘。

  • 提供 20 多种统计图表,可视化展示检索分析结果,辅助多维度的分析需求。
  • 提供交互式仪表盘,构建数据分析大盘。
  • 支持对接 Grafana 等第三方可视化工具。

数据加工

日志服务数据加工功能提供了数十个 DSL 加工函数以满足不同的数据处理需求。

  • 数据规整:针对格式混乱的字段内容进行内容提取、格式转换等规整操作,获取结构化数据。
  • 数据流转:将数据分发到多个下游系统进行存储或计算,供不同的业务系统使用。
  • 数据脱敏:对数据中的敏感信息进行脱敏。
  • 数据过滤:对复杂多样的数据进行过滤,只保留需要重点关注的核心信息。

定时 SQL 分析

定时 SQL 分析支持定期执行检索分析语句并保存分析结果。

  • 日志定时检索与分析:根据指定的时间窗口和调度周期,定期执行检索分析语句,并将分析结果保存到指定的目标日志主题中。
  • 日志聚合:对内容详尽的原始日志进行信息聚合,汇总为精度合适的日志,降低存储成本。
  • 日志过滤:对原始日志进行筛选与过滤,只保留需要关注的重要字段。

数据投递与消费

日志服务支持实时投递与消费功能。

  • 提供 Kafka 协议接口,对接下游生态系统。
  • 提供 SDK 消费日志,支持消费者、消费组模式。
  • 支持数据实时转储,快速流向 TOS 等多种异构存储系统。

告警

日志服务提供了一站式告警功能,包括数据监控、告警通知、告警管理等。

  • 支持通过告警策略定期监控检索分析结果,实现异常数据秒级告警。
  • 支持多渠道通知方式(钉钉、飞书、企业微信、邮件、短信、电话等),实现业务状态的实时通知。
  • 支持通过内容语法、内容函数和内容变量设计自定义的通知内容。

Trace 服务

日志服务提供了基于 OpenTelemetry 协议与标准的分布式链路追踪功能。

  • 支持接入、存储、检索分析各类 Trace 数据。
  • 支持多种 SDK 对接方式,无缝对接开源系统。