You need to enable JavaScript to run this app.
导航
配置使用其他数据源规则
最近更新时间:2024.11.29 16:40:00首次发布时间:2024.11.29 16:40:00

通过其他数据源功能,数据质量支持对 Hive 类型以外的其他数据源进行数据监控,以满足用户多场景下的数据监控需求。本文将为您介绍如何配置 EMR_SERVERLESS_STARROCKS 模板规则。

1 前提条件

已在概览页面购买大数据分析湖仓一体DataOps 敏捷研发分布式数据自治解决方案。

2 创建规则

  1. 登录 DataLeap 控制台。

  2. 选择数据质量 > 数据监控 > 离线数据监控 > 监控对象,进入监控对象页面。

  3. 在页面右上角的项目下拉列表中,选择要管理的项目。

  4. 单击其他数据源页签,进入其他数据源页面。

  5. 单击新建规则按钮,在弹出的创建规则侧拉窗口中,设置规则信息。
    Image
    监控规则配置相关参数说明如下表所示。欲了解其他配置情况的详细介绍可参见配置其他数据源规则

    参数

    说明

    规则基本信息

    *规则名称

    监控规则名,自行设定,如 serverless starrocks。

    *数据源/引擎类型

    下拉选择 EMR_SERVERLESS_STARROCKS

    *数据源/实例

    配置规则的数据源/实例,下拉选择一个已绑定的实例。绑定实例相关操作请参见绑定 EMR Serverless StarRocks 实例

    说明

    仅支持选择 StarRocks 2.x 和 StarRocks 3.x 版本的资源。

    规则配置

    *模板类型

    采用的模板类型。当前仅支持自定义类型,即使用符合语法规范的SQL语句创建规则。

    *XX查询语句

    对应所选数据源类型的查询语句,按需输入,例如SELECT pv from 库名.表名;,其中库表名、字段名按实际输入。

    报警条件

    解析举例的SQL语句后,设置信息如下,当监控检测出的表行数数值与设定的阈值(100)做对比,发现超过阈值时,就会发出报警。

    • 字段名称显示为 pv
    • 字段类型选择为指标
    • 报警条件设置为数值 >100

    运行设置

    *调度设置

    选择定时调度,即自行设置监控规则的执行时间。

    *执行频率

    任务监控规则执行频率,选择小时级

    *执行时间

    根据执行频率,设置具体的执行时间。

    • 执行小时选择 1415
    • 执行时刻设置为 45

    报警设置

    *报警渠道

    选择 Webhook

    *hookUrl

    从下拉列表中选择 https,填写创建飞书机器人时生成的 Webhook 地址,通知消息会推送至对应的群中。
    Image

    说明

    飞书报警机器人由您自行创建并配置,相关操作说明请参见告警机器人配置

    *报警对象

    选择接收报警的用户,默认当前用户,可按需修改。

    *报警发送

    报警发送次数,默认 1 次。

    *报警免打扰

    选择关闭

  6. 单击确定按钮,规则创建成功并显示在列表中。
    Image

3 运行规则并查看结果

  1. 单击该规则操作列的试跑按钮,在弹出的窗口中,设置试跑时间,可以开启新的试跑。
    Image

  2. 单击确定按钮,跳转到该规则的运行结果页面,待运行结束后,可以查看报警状态。
    Image

  3. 单击该监控信息操作列的运行日志按钮,可以查看该规则的监控运行日志,查找问题。
    Image