日志服务基础资源的配额限制如下。
限制项 | 说明 | 备注 |
---|---|---|
日志项目数量 | 每个账号在每个地域下,默认最多可创建 20 个日志项目。 | 如需调整配额,请参考申请资源配额。 |
日志主题数量 | 每个日志项目中,默认最多可创建 50 个日志主题。 | 如需调整配额,请参考申请资源配额。 |
日志分区数量 |
| 如需调整配额,请参考申请资源配额。 |
机器组 |
| 如需调整配额,请参考申请资源配额。 |
仪表盘 |
| 如需调整配额,请参考申请资源配额。 |
数据加工 |
| 如需调整配额,请参考申请资源配额。 |
数据消费 | 每个日志项目内默认最多可创建 150 个消费组 | 如需调整配额,请参考申请资源配额。 |
告警 |
| 如需调整配额,请参考申请资源配额。 |
日志保存时间 | 日志保存时间支持设置为 1~3650 天,3650 天表示永久保存。 | / |
每个火山引擎账号均提供一定的读写能力,详细说明请参考下表。
说明
非强制性要求,数据读写超出日志分区的读写能力时,系统会尽可能提供服务,但不承诺服务质量。
限制项 | 限制 |
---|---|
读 QPS | 20000 次/秒 |
写 QPS | 20000 次/秒 |
读流量 | 1 GiB/s |
写流量 | 1 GiB/s |
每个日志分区(Shard)均提供一定的读写能力,详细说明请参考下表。
说明
非强制性要求,数据读写超出日志分区的读写能力时,系统会尽可能提供服务,但不承诺服务质量。
限制项 | 限制 |
---|---|
读 QPS | 100 次/秒 |
写 QPS | 500 次/秒 |
读流量 | 20 MiB/s |
写流量 | 5 MiB/s |
每个火山引擎账号还定义了一些其他的日志服务流控限制,详细说明请参考下表。
限制项 | 限制 |
---|---|
LogCollector 配置获取 QPS | 4000 次/秒 |
LogCollector 心跳上报 QPS | 2000 次/秒 |
消费组心跳上报 QPS | 2000 次/秒 |
消费组 Checkpoint 获取 QPS | 500 次/秒 |
仪表盘订阅 QPM | 1 次/分钟 |
管控类接口调用 QPS | 20 次/秒 |
通过 LogCollector 采集日志数据时,请注意 LogCollector 的安装环境、采集行为等限制,详细说明请参考 LogCollector 限制说明。
日志服务中,日志的检索分析操作的限制如下。
限制项 | 说明 | 备注 |
---|---|---|
单字段字符数 | 日志分词前后,单个词的长度均不超过 255 个字节。 | 超出限制后无法通过关键词检索到此日志,但服务端保存的日志数据仍然是完整的。 |
检索语句长度 | 单条检索语句最大长度为 4,096 字符。 | / |
短语查询 | 短语查询最多选取 10,000 条日志进行短语匹配。 | |
操作并发数 |
说明
| / |
超时时间 | 查询操作的超时时间为 55s。 | / |
模糊查询 | 模糊查询时,日志服务最多查询到符合条件的 100 个词,然后返回包含这 100 个词以及满足查询条件的所有日志。 | / |
关键词查询 | 关键词查询时,每次查询最多可指定 30 个查询条件。 | / |
返回结果 | 每次查询时,默认最多返回 100 条查询结果。 | 通过翻页最多可以获取 100,000 条日志。 |
查询结果排序 | 默认按照秒级或毫秒级时间从最新日志开始展示。 | / |
单条日志内容显示 | 由于网页浏览器性能原因,对于超过 10,000 个字符的日志,日志服务只会对前 10,000 个字符进行 DOM 切词处理。 | 如果超出 10,000 个字符,控制台会提示“该日志存在超过 10,000 个字符的日志数据,部分显示上会有降级处理”。 |
限制项 | 说明 |
---|---|
数据量 | 单个 Shard 单次仅支持分析 1 GiB 数据。 |
检索分析语句长度 | 单条检索分析语句最大长度为 50,000 字符,其中检索语句部分最大长度为 4,096 字符。 |
操作并发数 |
说明
|
数据生效机制 | 分析功能只对开启统计功能后写入的数据生效。对于未打开统计功能的字段,SQL 分析结果展示为空。 |
SQL 分析仅对最新版本索引对应的数据生效。修改索引之前的数据可检索,不参与 SQL 分析。 | |
超时时间 | 查询操作的超时时间为 55s。 |
结果条数 | 每次分析时,默认返回结果 100 条。 |
限制项 | 说明 | 备注 |
---|---|---|
任务数量 | 每个日志项目中最多可以创建 100 个数据加工任务,每个日志主题最多可以创建 30 个数据加工任务。包括页面展示的所有状态的任务。 说明 已暂停和已完成状态任务占用配额。如果确认不再使用此状态的任务,建议及时清理任务列表,以减少配额占用。详细信息,请参考管理数据加工任务。 | 如需调整配额,请参考申请资源配额。 |
目标日志主题数量 | 在 1 个数据加工任务中,最多可以配置 20 个不同的日志主题,用于存储加工后的数据。 | 如需调整配额,请参考申请资源配额。 |
执行预览 | 数据加工的执行预览功能用于在线调试数据加工的代码,请注意以下限制:
| / |
加工性能 | 加工任务的总体速率计算公式为 | / |
分类 | 限制项 | 说明 |
---|---|---|
资源管理 | 定时 SQL 分析任务数量 |
|
删除定时 SQL 分析任务 | 日志服务的 Trace 功能依赖定时 SQL 分析任务的正常运行。为了保障 Trace 服务的可用性,请勿手动对 Trace 服务对应的定时 SQL 分析任务进行任何变更性操作,例如修改配置、删除等操作。如果需要修改 Trace 服务配置或关闭 Trace 服务,请在 Trace 服务的相关页面进行操作。 | |
历史执行记录 | 任务的历史执行记录最多保存 7 天。 建议添加定时 SQL 分析任务服务日志的告警监控任务,便于及时发现问题重试错误实例。 | |
数据写入 | 数据延迟 | 当数据存在延迟时,可能存在数据漏查的风险。即如果某时间点的数据在对应的调度实例执行完成之后才到达,则在下一个调度实例中也不会被查询。 |
实例并发 | 一个任务中最多只有 1 个调度实例为调度中状态。 | |
写入失败重试 | 数据在写入失败后会重试 3 次,每次间隔 60 秒。 连续 3 次写入失败后,该实例状态会变更为执行失败。 建议添加定时 SQL 分析任务服务日志的告警监控任务,便于及时发现问题重试错误实例。 |
限制项 | 说明 | |
---|---|---|
账号 | 不支持跨火山引擎账号投递日志,即日志项目和 TOS 存储桶应属于同一个火山引擎账号。 | |
地域 | 不支持跨地域投递日志,即日志主题和 TOS 存储桶应位于同一个地域。 | |
字段 | 投递日志时,JSON 格式默认投递包括 | |
资源配额 | 投递配置个数 | 每个日志主题可创建 10 个 TOS 投递配置。 |
投递任务查询 | 最多能查询 3 天内触发的投递任务。 | |
投递时间间隔 | 投递时间间隔可设置为 60~900 秒。 | |
投递数据大小 | 投递数据包上限为 5~256 MiB。 |
限制项 | 说明 |
---|---|
账号 | 不支持跨火山引擎账号投递日志,即日志项目和 Kafka 实例应属于同一个火山引擎账号。 |
地域 | 不支持跨地域投递日志,即日志主题和 Kafka 实例应位于同一个地域。 |
资源配额 | 每个日志主题可创建 10 个 Kafka 投递配置。 |
类别 | 限制项 | 说明 |
---|---|---|
告警监控 | 告警策略数量 | 每个日志项目中,最多创建 100 个告警策略。每个日志主题中,最多创建 10 个告警策略。 |
字段值的长度 | 如果字段的值超过 1024 个字符,只截取前 1024 个字符用于分析。 | |
检索分析的时间范围 | 每条查询和分析语句的时间跨度不能超过 24 小时。 | |
检索分析结果 |
| |
告警表达式长度 | 告警表达式的长度范围为 4~1024 个字符。 | |
通知管理 | 通知组数量 | 每个地域最多创建 100 个通知组。 |
通知渠道数量 | 每个通知组中,最多添加 10 个通知渠道。 | |
通知内容 | 通知内容的最大长度为 4096 个中文字符。 | |
渠道通知频率 | 日志服务各个告警渠道的通知频率限制如下。
说明 仅支持国内(+86)电话号码。 |
日志服务包括 Project、Topic、外部数据源、仪表盘、采集配置、定时 SQL 任务、加工任务、Trace 实例、投递任务等资源,其命名规则如下:
资源 | 说明 |
---|---|
Project、Topic、外部数据源 |
|
除 Project、Topic、外部数据源之外的其他资源 |
|