通过数据快车的流式加载任务,可以同步 Kafka 数据源的 增量 数据。
创建任务
- 在 数据快车-任务管理 界面,单击右上角“+创建任务”按钮,即可进入任务创建界面。
- 任务类型选择“流式加载”,给任务取一个名称,并选择已经购买的 DES 实例。
- 在”选择数据源“部分,选择已绑定的Kafka 数据源和需要同步数据的目标集群,并点击“下一步”。
- 配置数据源信息,以及目标数据库和目标数据表。
- 下面需要对源库和目标库进行Schema映射。系统会加载目标数据类型,您可以在左侧的”源列“手动匹配所需要的数据列,或者点击自动映射按钮来自动匹配再根据需求手动调整。然后,点击下一步按钮。
- 完成并确认“预检查”结果。
- 确认所有信息无误后,点击“启动任务”按钮。
任务管理
在 数据快车-任务管理 界面,我们可以在每个任务项右侧的操作栏中选择 开始/停止 或者 删除 任务。