弹性 MapReduce
-
弹性 MapReduce 新增组件(管理服务)
集群创建后,可以通过新增组件操作增加部署当前选定产品版本中支持的其它组件,这里说明通过控制台新增组件的操作。
-
弹性 MapReduce 角色管理(管理服务)
角色管理提供了角色服务级别和具体的 POD 维度的运维操作功能,如重启操作。POD 健康状态支持监控,以便于了解角色进程实时状态。
-
弹性 MapReduce 重启服务(管理服务)
集群中服务角色升级更新或修改配置后,需要重启对应的服务使配置生效。这里说明通过控制台重启服务的操作。
-
弹性 MapReduce Spark 查询
提供快速查看 Spark 作业的提交用户、状态、持续时间等多项明细指标,并支持作业级历史任务对比、作业洞察、任务执行信息等。
-
弹性 MapReduce 跨可用区服务高可用
Hadoop 集群机架感知是指 Hadoop 分布式计算框架中的节点会根据网络拓扑结构进行组织,并且在任务调度和数据存储时将优先发生在同一机架内的节点之间,以提高集群性能和可靠性的技术。
它是由 HDFS 和 YARN 两个组件来支持的。HDFS 通过将数据块的副本分布在不同的机架上,实现数据的高可靠性和高可用性。YARN 则通过将任务分配到距离更近的节点或容器上,提高任务执行的效率和性能。
而 Hadoop 无法自。 -
弹性 MapReduce 立即释放
当集群处于隔离状态或节点处于待回收状态时,EMR 控制台支持一键释放,避免关联产品持续扣费,节约成本。
-
弹性 MapReduce Hive 概述
Hive 是一个建立在 Hadoop 文件系统上的数据仓库架构,它为数据仓库的管理提供了许多功能,包括数据 ETL(抽取、转换和加载)工具、数据存储管理和大型数据集的查询和分析能力。同时 Hive 还定义了类 SQL 的开发语言,允许用户将结构化的数据文件映射为一张数据库表,并提供简单的 SQL 查询功能。
-
弹性 MapReduce HiveServer2 负载均衡
当 EMR 集群有多个 HiveServer2 服务时,可以借助 Zookeeper 服务实现访问 HiveServer2 的负载均衡,这篇详细介绍 HiveServer2 负载均衡的使用方法。
-
弹性 MapReduce 自定义函数 UDF
这篇说说腾讯云EMR中Hive自定义函数(UDF/UDTF/UDAF)的分类、开发流程(继承UDF或GenericUDF)及使用步骤,包括打包、上传至HDFS、创建函数并执行查询。 UDF分类:UDF(一对一)、UDTF(一对多)、UDAF(多对一)。 开发方式:推荐继承GenericUDF,重写initialize/evaluate/getDisplayString方法。 使用流程:打包jar→上传HDFS→cre。
-
弹性 MapReduce EMR on TKE 简介
腾讯云 EMR on TKE 基于容器化服务、开源大数据引擎,提供可快速部署、灵活伸缩、高效安全的大数据服务部署平台。通过控制台的应用管理等功能优势使用户聚焦于业务应用。服务引擎覆盖 Spark、Hive、Trino 等大数据组件,方便用户轻松的运行、管理和扩展容器化应用程序。