yun
-
数据湖计算 DLC ANALYZE TABLES
ANALYZE TABLES [ { FROM | IN } database_name ] COMPUTE STATISTICS [ NOSCAN ]ANALYZE TABLE table_identifier[ PARTITION ( partition_col_name [ = partition_col_val ] [ , … ] ) ]COMPUTE STATISTICS [ NOSCAN | FOR。
-
数据湖计算 DLC UDF 函数开发指南
用户可通过编写 UDF 函数,打包为 JAR 文件后,在数据湖计算定义为函数在查询分析中使用。目前数据湖计算 DLC 的 UDF 为 HIVE 格式,继承 org.apache.hadoop.hive.ql.exec.UDF,实现 evaluate 方法。
示例:简单数组 UDF 函数。 -
数据湖计算 DLC 查询脚本参数
为方便用户使用脚本参数进行查询,数据湖计算DLC支持配置日期参数进行查询。
数据湖计算 DLC 标准日期格式为:yyyymmddhh24miss,通过${}命令将日期设为变量,变量分为日期、时间两个部分,结果为两部分之和。 -
数据湖计算 DLC INSERT INTO(DML 语法)
[ WITH with_query [ , … ] ]INSERT {INTO [
]| TABLE} table_identifier [ partition_spec ] [ ( column_list ) ] { VALUES ( { value | NULL } [ , … ] ) [ , ( … ) ] | query }。
数据湖计算 DLC 引擎资源关联标签
标签用于对资源进行分类整理。标签由标签键和标签值组成,一个标签键可以对应多个值。用户可以为云资源创建和绑定标签对云资源进行管理。DLC 支持在产品控制台和新购页为独享引擎绑定标签,通过标签对独享引擎资源进行多维度分类管理以及账单细分。
数据湖计算 DLC 分区字段策略
在 Hive 中,分区信息是以目录形式出现的。在 Iceberg 中,分区信息记录到最终底层数据文件中,这使得 Iceberg 的分区更加灵活,而且可以随着数据量的变化演变分区策略。在数据湖计算 DLC 中,可以以创建Iceberg 表来使用隐藏分区等特性。
数据湖计算 DLC ALTER TABLE ADD PARTITION FIELD
ALTER TABLE table_name ADD PARTITION partition_column | hidden_partition_spec [AS alias]hidden_partition_spec: Supported transformations are: years(ts): partition by year months(ts): partition by month days(ts。
数据湖计算 DLC ALTER TABLE DROP PARTITION FIELD
ALTER TABLE table_name ADD PARTITION partition_column | hidden_partition_spechidden_partition_spec: Supported transformations are: years(ts): partition by year months(ts): partition by month days(ts) or date(t。
数据湖计算 DLC DELETE STATEMENT
DELETE FROM table_name [ [ AS ] alias ][ WHERE booleanExpression ]。
数据湖计算 DLC 元数据加速桶的绑定
数据湖计算 DLC 支持绑定融合桶加速查询分析性能,使用该功能需要创建元数据加速桶,DLC 托管存储提供元数据加速桶,使用用户账号下的对象存储桶。