You need to enable JavaScript to run this app.
导航
概述
最近更新时间:2024.11.27 16:26:32首次发布时间:2022.11.09 11:47:36

日志服务支持将采集到服务端的日志数据定期投递到 TOS 进行长期存储,本文档介绍日志投递到 TOS 功能的基本概念、计费规则等信息。

功能概述

火山引擎对象存储 TOS 是火山引擎提供的海量、安全、低成本、易用、高可靠、高可用的分布式云存储服务。日志服务支持投递日志到对象存储 TOS,开启此功能后,日志服务将定期处理日志数据,并将其打包投递到 TOS 的存储桶中进行保存,适用于海量数据长期存储的场景,存储价格低廉,性价比高。另外,日志数据投递到对象存储 TOS 之后,还可以通过离线计算或联合其他系统消费日志数据。
投递日志时,支持配置以下投递格式。

投递的数据格式

说明

相关文档

JSON 格式

数据投递到 TOS 后以 JSON 格式保存。JSON 格式作为常见的数据格式,适用于多种结构化数据场景。

以 JSON 格式投递

CSV 格式

数据投递到 TOS 后以 CSV 格式保存,CSV格式文件中各字段之间以指定的分隔符进行分割。

以 CSV 格式投递

此外,日志服务提供数据投递功能的服务日志,用于查看投递任务的进度和状态等信息。详细说明请参考服务日志

费用说明

投递日志到 TOS 涉及日志服务的数据投递费用和 TOS 的数据存储费用。

  • 数据投递费用根据以 JSON 或 CSV 格式投递的原始日志量进行计费,详细说明请参考日志服务计费项
  • 日志数据投递到 TOS 之后,TOS 会收取数据存储费用。TOS 的数据存储费用与存储量与存储桶的类型有关。
    • 如果开启了数据压缩,则根据压缩后的文件大小进行计费。
    • 不同的类型的存储桶价格请参考对象存储计费概述

限制说明

限制项

说明

账号

不支持跨火山引擎账号投递日志,即日志项目和 TOS 存储桶应属于同一个火山引擎账号。

地域

不支持跨地域投递日志,即日志主题和 TOS 存储桶应位于同一个地域。

字段

投递日志时,JSON 格式默认投递包括 __source__ 等元数据字段在内的所有字段,CSV 格式可设置投递的字段列表。

资源配额

投递配置个数

每个日志主题可创建 10 个 TOS 投递配置。

投递任务查询

最多能查询 3 天内触发的投递任务。

投递时间间隔

投递时间间隔可设置为 60~900 秒。

投递数据大小

投递数据包上限为 5~256 MiB。