yun
-
弹性 MapReduce Hive 基础操作
这篇演示如何使用 EMR 上的 Hive 创建库表、导入数据、执行查询等基础操作。
-
弹性 MapReduce Phoenix JDBC 使用
在本地 shell 下进入你想要新建工程的目录,例如 D://mavenWorkplace 中,输入如下命令新建一个 Maven 工程mvn archetype:generate -DgroupId=$yourgroupID -DartifactId=$yourartifactID -DarchetypeArtifactId=maven-archetype-quickstart。
-
弹性 MapReduce Hive 开发指南
Apache Oozie 是一个开源的工作流引擎,被设计将 hadoop 生态组件的任务编排成 Workflow,然后对其进行调度、执行、管理。这篇通过示例简单介绍如何在 EMR 上使用 Oozie,详细的使用文档可进一步参考社区文档。
-
弹性 MapReduce Presto 服务 UI
Presto 是一个开源的分布式 SQL 查询引擎,适用于交互式分析查询,数据量支持 GB 到 PB 字节。Presto 的设计和编写是为了解决大规模的甚至超大规模商业数据仓库的交互式分析和处理速度的问题。Presto 支持在线数据查询,包括 Hive、Cassandra、关系数据库以及专有数据存储。一条 Presto 查询可以将这些多个数据源的数据进行合并,可以跨越整个组织进行分析。EMR 代理了 Presto 原。
-
弹性 MapReduce 分析 COS 上的数据
本节将基于腾讯云对象存储 COS 展示 Hive 连接器更多使用方法,数据来源于直接插入数据、COS 数据和 lzo 压缩数据。
-
弹性 MapReduce 连接器
Presto 是由 Facebook 开发的一个分布式 SQL 查询引擎,被设计为用来专门进行高速、实时的数据分析,适用于交互式分析查询,数据量支持 GB 到 PB 字节。支持标准的 ANSI SQL,包括复杂查询、聚合(aggregation)、连接(join)和窗口函数(window functions)。采用 Java 实现。Presto 的数据源包括 Hive、HBase、关系数据库,甚至专有数据存储。其架构。
-
弹性 MapReduce 增量 DB 数据到 HDFS
Sqoop 是一款开源的工具,主要用于在 Hadoop 和传统数据库(MySQL、PostgreSQL 等)之间进行数据传递,可以将一个关系型数据库(例如 MySQL、Oracle、Postgres 等)中的数据导入到 Hadoop 的 HDFS 中,也可以将 HDFS 的数据导入到关系型数据库中。Sqoop 中一大亮点就是可以通过 Hadoop 的 MapReduce 把数据从关系型数据库中导入数据到 HDFS。
-
弹性 MapReduce 计算组
腾讯云 EMR 在 StarRocks 存算分离场景下,通过计算组(Multi-Warehouse) 实现计算资源的精细化管理与业务负载隔离;以满足多业务并发和多样化场景需求,确保服务的高稳定性和数据查询的高速度。这里说明如何管理计算组,包括同步计算组、新增计算组、扩缩容计算组、重启计算组等操作。
-
弹性 MapReduce 开启 Spark 优化插件
SparkSQL 优化主要针对于周期性执行的 SparkSQL 任务,根据其历史运行特征,动态优化资源使用量。
-
弹性 MapReduce 开启 Hive 优化插件
Hive 优化主要适用于周期性执行的 Hive On MR 任务,根据其历史运行特征,动态优化资源使用量。