You need to enable JavaScript to run this app.
导航
4.2.2 强规则熔断任务
最近更新时间:2022.09.05 11:25:34首次发布时间:2022.09.05 11:25:34
我的收藏
有用
有用
无用
无用

alt

当数据任务执行完成后,数据也随之产出。但数据产出不代表数据就可用,可能存在多种不符合预期的异常情况,最常见的有:

  1. 数据为空,可能由于一些上游数据异常,或者依赖配置错误,导致数据分区虽然产出,但实际为空,这种情况下其实等同于无效数据,下游也无法真正消费这份数据。
  2. 主键重复,因为一些数据计算异常,导致主键出现重复。
    通过对某份数据进行监控,用户需要将监控规则关联至某个任务,然后将规则设置为强规则。
    alt

当该关联的任务完成后,会触发强规则执行,当强规则执行通过,才会将任务状态置为成功;若强规则执行不通过,任务状态会置为失败,阻断下游任务的运行,避免数据污染扩散。