yun
-
弹性 MapReduce 集群缩容
集群缩容是指当 EMR 集群计算资源过剩时,可通过控制台对 Task 节点进行缩容。且当集群存在路由节点(router 节点)不用分担 Master 节点的负载,或作为集群的任务提交机时,可通过缩容节点实现集群缩容功能。
-
弹性 MapReduce TensorFlow 简介
TensorFlow 是一个端到端开源机器学习平台。它拥有一个全面而灵活的生态系统,其中包含各种工具、库和社区资源,可助力研究人员推动先进机器学习技术的发展,并使开发者能够轻松地构建和部署由机器学习提供支持的应用。
-
弹性 MapReduce TensorFlowOnSpark 简介
TensorFlowOnSpark 为 Apache Hadoop 和 Apache Spark 集群提供了可扩展的深度学习,TensorFlowOnSpark 支持所有类型的 TensorFlow 程序,可以实现异步/同步的训练和推理,同时也支持模型并行性和数据的并行处理。详情可查阅 TensorFlowOnSpark 页面。
-
弹性 MapReduce YARN 作业日志转存 COS
Hadoop 默认将 YARN 的作业日志存储在 hdfs 上,腾讯云 EMR 还提供了将 YARN 作业日志存储在外部存储 COS 上。
-
弹性 MapReduce Kudu 简介
Apache Kudu 是一个分布式,可水平扩展的列式存储系统,它完善了 Hadoop 的存储层,可对快速变化数据进行快速分析。
-
弹性 MapReduce 分析 COS/CHDFS 上的数据
本节将基于腾讯云对象存储 COS 展示 Impala 更多使用方法,数据来源于直接插入数据、COS 数据。
-
弹性 MapReduce 在腾讯云中使用 Alluxio 文档
在腾讯云 EMR 上提供了开箱可用的 Alluxio 服务,以帮助腾讯云客户可以快速实现分布式内存级缓存加速、简化数据管理等。同时还可以通过腾讯云 EMR 控制台或 API 接口,使用配置下发功能,快速配置多层级缓存和元数据管理等,获取一站式监控告警等功能。
-
弹性 MapReduce 自动伸缩概述
当集群负载随业务发生变化时,可在弹性 MapReduce 中通过配置伸缩规则,自动补充或缩减 Task 节点计算资源,在快速响应计算需求变化的同时节约成本。自动伸缩支持按负载伸缩和时间伸缩两种伸缩策略,负载伸缩适用于 Hadoop、StarRocks 和 RSS 等集群类型。
-
弹性 MapReduce 集群脚本
集群脚本功能支持批量选择节点运行指定脚本,以便高效进行批量运维操作。一个集群同一时间只能运行一个集群脚本,如果有正在运行的集群脚本,则无法再提交执行新的集群脚本。例如,安装第三方软件和修改集群运行环境。
-
弹性 MapReduce 检查更新公网 IP
EMR 控制台支持检查更新 master1 上的公网 IP,更新或添加后集群配置信息 Master 公网 IP 的同步更新,服务 WebUI 访问地址同步更新。