本文为您介绍如何查看并管理 BMQ Topic 的数据详情。
1 前提条件
在搜索前,需要在数据地图 > 元数据采集页面新建采集器,将集群的元数据采集到数据地图。相关操作说明可参见元数据采集。
2 查看数据详情
- 登录 DataLeap 控制台。
- 选择概览 > 数据地图 > 数据检索,进入数据检索页面。
- 搜索数据后,进入数据详情页面。
- 可以查看数据详情,并进行数据管理。
- 位于页面顶部的各摘要信息
- 可以查看表名、元数据完善度等信息。其中,完善度计算方式为:负责人20%、表描述20%、字段描述30%(按字段填充比率折算)、业务域15%、层级15%。
- 可以查看点赞数、收藏人数,并单击相应图标点赞或收藏该表。
- 表结构信息详情,包括表的明细信息、使用说明、血缘关系、评论问答等功能信息。
- 右侧信息栏的数据表基本信息,包括基础信息、业务信息、安全信息和技术信息。
3 管理表结构信息
3.1 明细信息
- 登录 DataLeap 控制台。
- 选择概览 > 数据地图 > 数据检索,进入数据检索页面。
- 搜索数据表后,进入数据表详情页面。
- 单击明细信息页签,进入表的明细信息页面。
- 可以查看该表的字段信息和变更记录。
3.2 使用说明
本功能用于撰写数据表的使用说明文档,一般由表负责人撰写。相关操作步骤如下:
- 登录 DataLeap 控制台。
- 选择概览 > 数据地图 > 数据检索,进入数据检索页面。
- 搜索数据表后,进入数据表详情页面。
- 单击使用说明页签,进入添加使用说明页面。
- 单击编辑按钮,提示可以新增卡片页,单击页面左上角显示的加号 +,弹出新增标签窗口。
- 输入标签名后,单击确定按钮,增加相应的标签页。
- 从下拉列表中选择编辑工具,输入说明内容后,单击保存按钮,完成添加。
- 还可编辑和删除已添加的内容。
- 单击编辑按钮,标签页进入编辑状态。
- 可执行以下操作:
- 单击标签名称旁的编辑图标,可以修改标签名称。
- 单击标签名称旁的删除图标,二次确认后,删除标签页。
- 编辑说明内容。
- 单击保存按钮,完成编辑。
3.3 血缘关系
用于查看该表的数据都由哪些表计算得到,即该表的上游血缘,以及该表的数据又用于计算生成了哪些表格,即该表的下游血缘,并进行相应的管理。血缘有表格视图、可视化图表两种展示方式。
3.3.1 表格视图
- 登录 DataLeap 控制台。
- 选择概览 > 数据地图 > 数据检索,进入数据检索页面。
- 搜索数据表后,进入数据表详情页面。
- 选择血缘关系 > 表格视图页签,进入血缘关系的表格视图页面。
- 可执行以下操作:
- 设置查看条件,查看符合条件的数据,包括数据资产节点、血缘层级、节点负责人、任务名称、任务负责人等信息。
- 查看范围:包含查看全部、仅为上游、仅为下游。
- 层级:建议≤20层。
- 搜索:可输入节点名、任务名等,查到具体对象。
注意
- 血缘的更新频率为小时级,即每小时会将新的依赖关系更新到血缘关系中。
- 若血缘无法自动解析或解析不准确,可通过在数据开发 > 任务开发 > 调度设置页面手动登记的方式进行补充。
- 单击右侧的下载信息按钮,将列表中的节点数据保存成csv格式本地浏览使用。
- 设置快速通知
- 勾选一条或多条列表中的节点数据,单击右侧的快速通知按钮,弹出快速通知窗口。
- 配置通知信息,单击通知按钮,弹出确认通知对话框。
- 单击确定按钮完成设置。当上下游节点表变更信息时,系统会将通知发送到目标用户登记的邮箱中。
说明
仅表的负责人可设置快速通知,当前仅支持“邮件”通知方式。
3.3.2 可视化图表
可视化图表分为表视图、列视图、分区视图三种显示方式。
- 登录 DataLeap 控制台。
- 选择概览 > 数据地图 > 数据检索,进入数据检索页面。
- 搜索数据表后,进入数据表详情页面。
- 选择血缘关系 > 可视化图表页签,进入血缘关系的可视化图表页面。
- 可执行以下查询操作:
- 表视图
- 范围x层:可以选择节点范围,包括层级(1层~5层)、上下游节点信息,即可在图中展示全部所选层级的上下游。
- 分组:可以分组显示节点信息,分组结果会在图中展示。
- 筛选:可以筛选一个或多个数据类型,展示相应的节点信息,缩小查找的节点范围。
- 属性展示:可选中一个或多个属性,展示在列表中。最多可同时展示3个属性。
- 右上方3个图标按钮分别是全屏、重置、下载CSV表格。
- 单击某一个节点,可以高亮该节点到主节点的链路,其他节点会置灰;再单击图交互区空白处,该节点可取消高亮。
- 可以单击表名称,在右边的信息栏查看该表的节点信息和任务信息。在节点信息栏,还可以做以下操作:
- 单击查看表详情按钮,跳转到数据检索页面,查看该表的明细信息。
- 单击切换为主节点按钮,可以将非主节点的表切换为主节点进行展示。
- 列视图
- 主节点字段:可以展示一个或多个主节点字段的血缘关系。最多可同时展示5个。
- 范围x层:可以选择节点范围,包括层级(1层~5层)、上下游节点信息,即可在图中展示全部所选层级的上下游。
- 右上方3个图标按钮分别是全屏、重置、下载CSV表格。
- 单击某一个字段节点,可以高亮该节点到主节点的链路,其他节点会置灰;再单击图交互区空白处,该节点可取消高亮。
- 可以单击表名称,在右边的信息栏查看该表的节点信息和任务信息。在节点信息栏,还可以做以下操作:
- 单击查看表详情按钮,跳转到数据检索页面,查看该表的明细信息。
- 单击切换为主节点按钮,可以将非主节点的表切换为主节点进行展示。
- 分区视图
- 可以查看范围(显示全部、只看上游或只看下游)、层级(1层~5层),即可在图中展示全部所选层级的上下游。层级范围下方的4个按钮分别是居中显示、放大、缩小、全屏/取消全屏。
- 可以输入关键词标记,以便搜索查找关键信息。
- 分类聚合:按照分类条件筛选,可以将同类型的信息展示在对应标签的提示框中。
- 单击某一个节点,可以高亮该节点和该节点的上下游,其他节点会置灰;再次单击该节点可取消高亮。也可以点住图交互区空白处不放,然后移动鼠标,交互图会随着鼠标平移。
- 可以单击表名称,在右边的信息栏查看该表的节点信息和任务信息。
3.4 评论问答
本功能支持查看该表的评论问答信息,也支持发布评论、提问信息。
- 登录 DataLeap 控制台。
- 选择概览 > 数据地图 > 数据检索,进入数据检索页面。
- 搜索数据表后,进入数据表详情页面。
- 单击评论问答页签,进入评论问答页面。
- 可执行以下操作:
- 在搜索框中,搜索评论问答对象,并单击要查看的对象,可以分类查看该表的评论问答信息。
- 单击评论按钮,可以填写评论信息。
- 单击我要提问按钮,可以向负责人提出问题。
- 编辑或删除自己创建的评论问答信息。
鼠标悬停在某条信息上,单击显示的相应图标按钮,可以编辑或删除该条信息。
4 管理表基本信息
登录 DataLeap 控制台。
选择概览 > 数据地图 > 数据检索,进入数据检索页面。
搜索数据表后,进入数据表详情页面。
可以查看表的基础信息、业务信息等信息,并执行以下管理操作:
- 将鼠标悬停在某参数上,单击显示的编辑图标,修改参数信息后,单击确定图标,完成修改。
- 单击是否隐藏的开启/关闭图标按钮,可以决定是否隐藏表的安全信息。
数据表信息相关参数说明如下表所示。
参数 | 说明 |
---|
基础信息 |
中文名 | 该元数据的中文名称,不可编辑。 |
描述 | 元数据的描述信息,不可编辑。 |
负责人 | 该元数据的负责人,默认为主账号,不可编辑。 |
业务线 | 该元数据所属的业务线,可编辑,下拉可选已创建的业务线。 |
数据层级 | 数据表所在的层级,可编辑,支持以下选项,下拉可选。支持通过搜索层级名称关键词快速选择。 - 基础数据层(ods)
- 数据整合层(dwi)
- 基础维度层(dim)
- 明细数据层(dwd)
- 中间数据层(dwm)
- 数据服务层(dws)
- 数仓应用层(dwa)
- 数据集市层(dm)
- 应用服务层(ads)
- 应用层(app)
|
数据分类 | “资产目录”中,指定业务线下的文件目录名称,用于资产门户构建。可编辑,下拉可选已创建的数据分类。
选择业务线后,才可设置该参数。 |
项目 | 数据表所属的项目,可编辑,下拉可选已创建的项目。 |
是否核心 | 显示该表是否为核心,可编辑。 |
评论问答 | 数据表的评论问答信息,不可编辑。 |
Schema类型 | 接入的schema类型,不可编辑。 |
业务信息 |
业务域 | 元数据所属的业务域,可编辑,下拉可选已创建的业务域。
支持通过搜索业务域名称关键词快速选择。 |
产品线 | 元数据所属的产品线,可编辑,下拉可选已创建的产品线。
支持通过搜索产品线名称关键词快速选择。 |
主题 | 元数据所属的主题,可编辑,下拉可选已创建的主题。
支持通过搜索主题名称关键词快速选择。 |
自定义标签 | 为元数据设定的标签,可编辑,支持以下两种设置方式: - 下拉可选已有标签,支持通过搜索标签关键词快速选择。
- 自行设置标签:手动输入标签后,在下拉列表中选择该标签。
|
业务术语 | 元数据所关联的业务术语,可编辑,下拉可选已创建的业务术语。
支持通过搜索业务术语名称关键词快速选择。 |
安全信息 |
我的权限 | 当前登录账号对该表可执行的操作权限,不可编辑。 |
是否隐藏 | 表示该表是否隐藏,可编辑。
数据表隐藏后,若您不是该表的库管或表负责人,且没有该表的读写权限,则无法在数据检索页面查看其详情信息。 |
技术信息(仅可查看) |
资源池名 | 显示存放 Topic 的资源池名。 |
资源池ID | 显示存放 Topic 的资源池的 ID。 |
partition数 | 显示 Topic 的分区数。 |
创建时间 | 显示表的创建时间。 |
更新时间 | 显示表最近的更新时间,编辑数据源其他信息后该字段会自动更新。 |