You need to enable JavaScript to run this app.
导航
EMR Serverless Spark
最近更新时间:2025.03.26 20:37:21首次发布时间:2024.12.13 11:00:36
我的收藏
有用
有用
无用
无用

1. 概述

支持接入 EMR Serverless Spark 去创建数据集。
(该功能目前仅支持私有化部署v2.75.0及以上版本产品使用,如需购买,请您联系商务人员进行咨询。)
在连接数据之前,请收集以下信息:

  • 数据库所在服务器的 IP 地址和端口号
  • 数据库的用户名和密码
  • 数据库的队列和计算组

2.快速入门

下面介绍两种方式创建数据连接。

2.1 从数据连接新建

(1)进入火山引擎,点击进入到某个具体项目下,点击数据准备,在下拉列表找到数据连接,新建数据连接。

(2)在页面中选择 EMR Serverless Spark 。

(3)填写所需的基本信息,并进行测试连接,连接成功后点击保存。

(4)确认数据连接的基本信息无误后即完成数据连接。

(5)可使用该连接创建数据集:点击数据准备-->数据集,选择左上角「新建」按钮进行数据集的新建。

(6)输入关键词搜索,选择之前新建好的数据连接。

2.2 从数据集新建

(1)进入火山引擎,点击数据准备-->数据集,选择左上角「新建」按钮,新建数据集。
Image
Image
(2)选择数据连接的时候,点击其他按钮。
Image
之后的步骤与上述 2.1 的(2)、(3)步一致,在完成配置之后会停在数据集选择数据连接的弹出框中,即可直接进行下一步的数据集创建。

3.功能介绍

数据连接过程需关注的基本信息描述如下。

名称

描述

数据连接名称

新建数据连接的名称,用于在系统中区分不同数据库的连接。例如 EMR。
可对名称进行修改。请输入规范的名称,不要使用特殊字符,前后不能包含空格。

连接方式

IP/Port 和 JDBC 连接字符串两种。
详情可参考文档:JDBC使用

服务器

连接EMR Serverless Spark 的地址,每个 region 不一样。
华北:serverless-spark-jdbc.emr.cn-beijing.volces.com
华东:serverless-spark-jdbc.emr.cn-shanghai.volces.com
华南:serverless-spark-jdbc.emr.cn-guangzhou.volces.com
柔佛:serverless-spark-jdbc.emr.ap-southeast-1.volces.com

端口

EMR 的实例端口,公有云一般是10009。
详情可参考文档:集群组件端口说明

用户名

租户的 AccessKey。
获取可参考文档:Access Key(密钥)管理使用前必读

密码

租户的 SecretKey。
获取可参考文档:Access Key(密钥)管理

队列

连接使用的队列名称,目前只支持使用独占队列,不支持公共队列。

计算组

计算组名称,不填默认使用 Default 计算组。

填写示例如下图所示: