云服务器特惠 99/年起
  1. 腾讯云优惠网首页
  2. 腾讯云产品

弹性 MapReduce 部署说明

• 腾讯云产品

部署说明用于查看 EMR on TKE 集群支持部署的集群类型、服务角色信息、Pod 默认规格信息、以及数据卷目录，便于用户参考调整服务部署资源配置。

相关产品
弹性 MapReduce 产品页，含版本规格、价格与购买入口。

一、部署信息说明

容器类型 组件 角色 Pod 默认规格   数据卷目录
    Cpu 限制（核） 内存限制（GB） Pod 数量范围
TKE hive HiveMetaStore 1-100 2-100 1-100 新建 PVC，主机路径
  HiveServer2 1-100 2-100 1-100 新建 PVC，主机路径
 hue Hue 2-100 4-100 1-100 新建 PVC，主机路径
 kyuubi KyuubiServer 1-100 2-100 2-100 新建 PVC，主机路径
 ranger Ranger 1-100 2-100 1-100 新建 PVC，主机路径
  RangerUsersync 1-100 2-100 1-100 新建 PVC，主机路径
 rss Coordinator 1-100 2-100 2-100 新建 PVC，主机路径
  ShuffleServer 2-100 4-100 3-100 新建 PVC
 spark SparkJobHistoryServer 1-16 1-64 1-2 新建 PVC，主机路径
 trino TrinoCoordinator 1-100 2-100 1-2 新建 PVC，主机路径
  TrinoWorker 1-100 2-100 2-100 新建 PVC，主机路径
 zookeeper QuorumPeerMain 1-100 2-100 3-100 新建 PVC
 knox Knox 1-100 2-100 1-100 新建 PVC，主机路径
 JupyterLab JupyterLab 2-100 4-100 1-100 新建 PVC，主机路径
 EG EnterpriseGateway 2-100 4-100 1-100 新建 PVC，主机路径
 MLflow TrackingServer 2-100 4-100 1-100 新建 PVC，主机路径
TKE Serverless hive HiveMetaStore 1-100 2-100 1-100 新建 PVC
   HiveServer2 1-100 2-100 1-100
  hue Hue 2-100 4-100 1-100
  kyuubi KyuubiServer 1-100 2-100 2-100
  ranger Ranger 1-100 2-100 1-100
   RangerUsersync 1-100 2-100 1-100
  rss Coordinator 1-100 2-100 2-100
   ShuffleServer 2-100 4-100 3-100
  spark SparkJobHistoryServer 1-16 1-64 1-2
  trino TrinoCoordinator 1-100 2-100 1-2
   TrinoWorker 1-100 2-100 2-100
  zookeeper QuorumPeerMain 1-100 2-100 3-100
  knox Knox 1-100 2-100 1-100
 JupyterLab JupyterLab 2-100 4-100 1-100 
 EG EnterpriseGateway 2-100 4-100 1-100 
 MLflow TrackingServer 2-100 4-100 1-100 
计算资源 hive HiveMetaStore 1-100 2-100 1-100 新建 PVC，主机路径
  HiveServer2 1-100 2-100 1-100 新建 PVC，主机路径
 hue Hue 2-100 4-100 1-100 新建 PVC，主机路径
 kyuubi KyuubiServer 1-100 2-100 2-100 新建 PVC，主机路径
 ranger Ranger 1-100 2-100 1-100 新建 PVC，主机路径
  RangerUsersync 1-100 2-100 1-100 新建 PVC，主机路径
 rss Coordinator 1-100 2-100 2-100 新建 PVC，主机路径
  ShuffleServer 2-100 4-100 3-100 新建 PVC
 spark SparkJobHistoryServer 1-16 1-64 1-2 新建 PVC，主机路径
 trino TrinoCoordinator 1-100 2-100 1-2 新建 PVC，主机路径
  TrinoWorker 1-100 2-100 2-100 新建 PVC，主机路径
 zookeeper QuorumPeerMain 1-100 2-100 3-100 新建 PVC
 knox Knox 1-100 2-100 1-100 新建 PVC，主机路径
 JupyterLab JupyterLab 2-100 4-100 1-100 新建 PVC，主机路径
 EG EnterpriseGateway 2-100 4-100 1-100 新建 PVC，主机路径
 MLflow TrackingServer 2-100 4-100 1-100 新建 PVC，主机路径

注意：集群中服务角色 Pod 默认规格的最大值，将结合所选容器集群可用资源动态调整，实际最大值可能小于表中给定的最大值。

相关内容：

  1. 弹性 MapReduce 组件自定义部署 弹性 MapReduce 支持在控制台新增组件时，部分组件支持自定义选择节点部署和部署数量；另部分组件已部署后支持卸载，以及相关服务角色的添加和移除。...
  2. 弹性 MapReduce 节点进程 节点状态 > 进程信息页面提供了控制台直观方式来查看当前集群各节点的进程部署情况。不仅展示了各个进程的状态，还提供了进程级别的实时日志和 Thread Dump 工具。...
  3. 弹性 MapReduce 组件与 API 部署时映射关系 组件名与 API 对应数字映射关系或进程名与 API 对应数字映射关系，主要用于扩容集群节点（ScaleOutCluster）API 接口的 ServiceNodeInfo.N 和 SoftDeployInfo.N字段参数 long 型映射填写。...
  4. 弹性 MapReduce GC 分析 支持 Java 进程的 GC 在线分析，通过实时采集、记录、分析 GC 日志，帮助用户排查是否因 GC 导致的进程异常。...
  5. 弹性 MapReduce Java 分析 支持 Java 进程的 GC 在线分析，通过实时采集、记录、分析 GC 日志，帮助用户排查是否因 GC 导致的进程异常。...
  6. 弹性 MapReduce 组件版本概览 部分历史 EMR 发行版因开源组件版本较低，无法体验社区新特性，现已下线。下线的 EMR 发行版不再支持新集群创建，已购的集群仍可正常使用扩缩容等服务。...
  7. 弹性 MapReduce HiveServer2 和 MetaStore 迁移到 Router 登录 EMR 控制台，在集群列表中选择对应的集群单击 ID/名称进入集群详情页，在集群详情页中选择集群资源 > 资源管理，进入资源管理页面，单击扩容进入集群扩容页面。  在集群扩容页面中，选择扩容节点类型为 Router，扩容服务为 Hive，其他选项可根据需要自行选择。 。...
  8. 弹性 MapReduce 开启 Spark 查询采集插件 Spark 控制台查询管理及洞察等相关功能需要用户集群开启 Spark 的查询采集插件，面向采集到相关的查询信息进行多维度分析和预设策略及 AI 洞察调优。...
赞 (0)
上一篇 5天前
下一篇 5天前