本文为您介绍火山引擎 E-MapReduce（EMR）集群端口配置情况。
HDFS
| 所属组件服务 | 端口 | 配置 | 说明 |
|---|
| NameNode | 50070 | dfs.namenode.http-address | HDFS NameNode http 服务端口 |
| 50470 | dfs.https.port | HDFS NameNode https 服务端口 |
| 8020 | dfs.namenode.rpc.port | HDFS NameNode RPC端口 |
| DataNode | 50010 | dfs.datanode.address | HDFS DataNode服务端口 |
| 50075 | dfs.datanode.http.address | HDFS DataNode http 服务端口 |
| 50475 | dfs.datanode.https.address | HDFS DataNode https 服务端口 |
| 8010 | dfs.datanode.ipc.address | HDFS DataNode IPC端口 |
| JournalNode | 8485 | dfs.journalnode.rpc-address | HDFS JournalNode RPC端口 |
| 8480 | dfs.journalnode.http-address | HDFS JournalNode HTTP端口 |
| ZKFC | 8019 | dfs.ha.zkfc.port | HDFS ZKFC 端口 |
YARN
| 所属组件服务 | 端口 | 配置 | 说明 |
|---|
| ResourceManager | 8088 | yarn.resourcemanager.webapp.address | YARN RM http 服务端口 |
| 8090 | yarn.resourcemanager.webapp.https.address | YARN RM https 服务端口 |
| 8050 | yarn.resourcemanager.address | RM的applications manager(ASM)端口 |
| 8030 | yarn.resourcemanager.scheduler.address | scheduler组件的IPC端口 |
| 8025 | yarn.resourcemanager.resource-tracker.address | RM RPC 端口 |
| 8141 | yarn.resourcemanager.admin.address | RM admin 端口 |
| NodeManager | 8040 | yarn.nodemanager.localizer.address | localizer IPC 端口 |
| 8042 | yarn.nodemanager.webapp.address | YARN NM http服务端口 |
| 45454 | yarn.nodemanager.address | NodeManger进程端口 |
| TimeLineService | 10200 | yarn.timeline-service.address | Timeline Service 进程端口 |
| 8198 | yarn.timeline-service.reader.webapp.address | Timeline Service Reader http端口 |
| 8199 | yarn.timeline-service.reader.webapp.https.address | Timeline Service Reader https端口 |
| 8188 | yarn.timeline-service.webapp.address | Timeline Service web服务端口 |
| 8190 | yarn.timeline-service.webapp.https.address | Timeline Service web https服务端口 |
MapReduce
| 所属组件服务 | 端口 | 配置 | 说明 |
|---|
| HistoryServer | 10020 | mapreduce.jobhistory.address | MR history server ipc |
Hive
| 所属组件服务 | 端口 | 配置 | 说明 |
|---|
HiveServer2 | 10000 | hive.server2.thrift.port | hive Server2 对外提供 jdbc 连接的端口 |
| 10002 | hive.server2.webui.port | HiveServer2 提供的 web ui 访问端口 |
| 10002 | hive.server2.webui.port | HiveServer2 提供的 web ui 访问端口 |
| 30032 | HADOOP_OPTS 环境变量 | Prometheus 通过 jmx 工具监控 HiveServer 服务 |
| 10001 | hive.server2.thrift.http.port | HiveServer 通过 http 方式传输数据时，连接 url 的端口信息 |
| Hive Metastore | 9083 | METASTORE_PORT 环境变量 | hive metastore 的访问端口 |
| 30031 | HADOOP_OPTS 环境变量 | Prometheus 通过 jmx 工具监控 MetaStore 服务 |
Spark
| 所属组件服务 | 端口 | 配置 | 说明 |
|---|
| ThirftServer | 10016 | hive.server2.thrift.port | ThriftServer 对外提供的JDBC连接端口 |
| 30075 | SPARK_THRIFT_JAVAOPTIONS 环境变量 | Prometheus 通过 jmx 工具监控 ThriftServer 服务 |
| HistoryServer | 18081 | spark.history.ui.port | Spark historyServer web 端口 |
| livy | 8999 | livy.server.port | livy server 端口信息 |
OpenLDAP
| 所属组件服务 | 端口 | 配置 | 说明 |
|---|
| OpenLDAP | 389 | 启动参数 slapd -h 配置 | OpenLDAP 默认数据端口 |
| 636 | 启动参数 slapd -h 配置 | OpenLDAP 密文数据端口 |
Airflow
| 所属组件服务 | 端口 | 配置 | 说明 |
|---|
| WebServer | 8330 | airflow_web_port | Airflow WebServer web 访问端口 |
| Broker | 6379 | 默认值 | Airflow Worker 所依赖 Broker 访问端口 |
| Worker | 8793 | 默认值 | Airflow Worker Log 访问端口 |
Ranger
| 所属组件服务 | 端口 | 配置 | 说明 |
|---|
| Ranger admin | 6080 | 默认值 | Ranger admin 对外提供 REST API 访问端口 |
Hue
| 所属组件服务 | 端口 | 配置 | 说明 |
|---|
| Hue | 8888 | http_port | HTTP 端口 |
Hbase
| 服务 | 端口 | 配置 | 说明 |
|---|
| HBase Master | 16000 | hbase.master.port | Hbase master 端口 |
| 16010 | hbase.master.info.port | Hbase master http 服务端口 |
Region Server | 16020 | hbase.regionserver.port | Region Server 端口 |
| 16030 | hbase.regionserver.info.port | Region Server http 端口 |
Kafka
| 服务 | 端口 | 配置 | 说明 |
|---|
| Kafka Broker | 9092 | listeners | Kafka listener 端口 |
| 6667 | port | Kafka Broker 端口 |
Presto
| 所属组件服务 | 端口 | 配置 | 说明 |
|---|
| presto coordinator/worker | 8084 | http-server.http.port | Presto Http 端口 |
| 8085 | http-server.https.port | Presto Https 端口 |
| presto coordinator | 30071 | jvm 参数 | Presto 监控端口 |
Trino
| 所属组件服务 | 端口 | 配置 | 说明 |
|---|
| trino coordinator/worker | 9084 | http-server.http.port | Trino Http 端口 |
| 9085 | http-server.https.port | Trino Https 端口 |
| trino coordinator | 30072 | jvm参数 | Trino 监控端口 |
Zookeeper
| 所属组件服务 | 端口 | 配置 | 说明 |
|---|
| Zk Server | 2181 | clientPort | ZK server 端口 |
| 2888 | zoo.cfg 里 server.$id=$ip:$por1$port2 | ZK server Quorum port端口 |
| 3888 | zoo.cfg 里 server.$id=$ip:$por1$port2 | ZK server leader选举端口 |
| 9876 | admin.serverPort | ZK server admin 端口 |
OpenSearch
| 服务 | 端口 | 配置 | 说明 |
|---|
OpenSearch | 9200 | http.port | 集群外部 HTTP 通讯端口 |
| 9300 | transport.tcp.port | 集群内部 Tcp 通讯端口 |
| Dashboard | 5601 | server.port | Dashboard 端口 |