弹性 MapReduce
-
弹性 MapReduce 实例信息
实例信息是记录用户 EMR 集群的基本信息,用户可以在实例信息页查看集群的基础配置、软件信息和部署信息。
-
弹性 MapReduce Ranger 简介
Ranger 是大数据领域的一个集中式安全管理框架,实现对 Hadoop 生态组件的集中式安全管理。用户可以通过 Ranger 实现对集群中数据的安全访问,它主要是对 Hadoop 平台组件进行监管、启动服务以及资源访问进行控制,其核心思想为。
-
弹性 MapReduce 标签分账
腾讯云通过标签工具及账单分账能力实现用户云资源账单在统计分析维度上的自定义管理,适配用户对账单及成本分析的多维管理分析诉求。如希望按 EMR 集群视角或集群中部分节点使用者视角进行账单拆分,可使用 分账标签 进行账单分拆。
-
弹性 MapReduce 新增组件
弹性 MapReduce 支持在控制台新增组件,这里说明通过控制台新增组件的操作。
-
弹性 MapReduce EMR 各版本 Spark 相关依赖说明
https://spark.apache.org/docs/{spark.version}/index.html将 {spark.version} 替换为对应的 spark 版本,例如查看3.2.2版本的依赖关系,访问链接如下。
-
弹性 MapReduce WebUI 访问
软件 WebUI 入口功能是 EMR 提供的组件原生 UI 访问能力,通过 Master 节点的外网 IP(建议及时配置安全策略)可以快捷访问组件原生 UI。如果集群内网与企业网络互通,可关闭该外网 IP,直接通过内网访问组件原生 UI。
-
弹性 MapReduce Kafka 简介
腾讯云弹性 MapReduce(EMR)- Kafka 提供开源 Kafka 的云上托管服务,提供了便捷的 Kafka 集群部署、配置修改、监控告警等功能,为企业及用户提供安全稳定的 OLAP 解决方案。Kafka 数据管道是流计算系统中最常用的数据源(Source)和数据目的(Sink)。用户可以把流数据导入到 Kafka 的某个 Topic 中,通过 Flink 算子进行处理后,输出到相同或不同 Kafka 实例。
-
弹性 MapReduce HBase RIT 修复
HBase RIT 修复适用于在 HBase(HBase 版本在2.2.0及以上)集群中遇到 RIT(Region-In-Transition)问题,且 Region 处于较⻓时间的 RIT 状态时,对处于 FAILED_OPEN、FAILED_CLOSED、CLOSING 状态的 Region 进⾏修复。
-
弹性 MapReduce 集群销毁
这篇说明如何通过EMR控制台销毁集群,包括前提条件与操作步骤,强调包年包月集群销毁后可在回收站保留7天,按量计费集群则彻底销毁无法恢复,需提前备份数据。 前提条件:销毁前需备份数据,包年包月集群保留7天可恢复,按量计费集群直接销毁不可恢复。 操作步骤:登录控制台选择销毁,确认信息后勾选同意并开始销毁。
-
弹性 MapReduce Hive 元数据管理
当选择部署 Hive 组件时,Hive 元数据库提供了两种存储方式:第一种自动创建,Hive 元数据存储于集群独立购买 MetaDB;第二种是关联外部 Hive 元数据库,可选择关联 EMR-MetaDB 或自建 MySQL 数据库,元数据将存储于关联的数据库中,不随集群销毁而销毁。