yun

  • 数据开发治理平台 WeData 变量使用

    数据开发的变量使用分为三个层级,分别是项目级别、工作流级别、任务级别,不同级别的变量覆盖范围不同。

    腾讯云产品 6天前
  • 数据开发治理平台 WeData 周期工作流通用开发流程

    1. 登录 数据开发治理平台 WeData 控制台。2. 单击左侧菜单中的项目列表,找到需要操作开发流程的目标项目。

    腾讯云产品 6天前
  • 数据开发治理平台 WeData 任务节点类型

    接口请求域名: wedata.tencentcloudapi.com 。推荐使用 API Explorer
    点击调试
    API Explorer 提供了在线调用、签名验证、SDK 代码生成和快速检索接口等能力。可以查看每次调用的请求内容和返回结果以及自动生成 SDK 调用示例。

    腾讯云产品 6天前
  • 数据开发治理平台 WeData Hive SQL

    — 创建一个用户信息表create table if not exists wedata_demo_db.user_info (user_id string COMMENT ‘用户ID’,user_name string COMMENT ‘用户名称’,user_age int COMMENT ‘年龄’,city string COMMENT ‘城市’) COMMENT ‘用户信息表’;– 向用户信息表中插入数据。

    腾讯云产品 6天前
  • 数据开发治理平台 WeData Spark SQL

    — 创建一个用户信息表create table if not exists wedata_demo_db.user_info (user_id string COMMENT ‘用户ID’,user_name string COMMENT ‘用户名称’,user_age int COMMENT ‘年龄’,city string COMMENT ‘城市’) COMMENT ‘用户信息表’;– 向用户信息表中插入数据。

    腾讯云产品 6天前
  • 数据开发治理平台 WeData PySpark

    from pyspark.sql import SparkSessionfrom pyspark.sql.types import StructType, StructField, IntegerType, StringTypespark = SparkSession.builder.appName(“WeDataApp”).getOrCreate()schema = StructType([ StructFie。

    腾讯云产品 6天前
  • 数据开发治理平台 WeData Spark

    这篇说明如何向WeData工作流调度平台提交Spark任务,需在EMR集群启动Hive/Spark组件并具备COS权限,资源文件需存储于COS中。文档详细介绍了参数配置、SparkJar示例(以WordCount为例)及完整操作步骤,包括本地编写代码、打包上传、创建任务并配置调度。 参数说明:spark程序zip包需打包jar及依赖为zip,执行参数无需指定提交模式(默认yarn)。 SparkJar示例:通过mav。

    腾讯云产品 6天前
  • 数据开发治理平台 WeData DLC SQL

    向 WeData 的工作流调度平台提交一个 DLC SQL 任务执行。选 DLC 数据源类型时,提供“高级设置”,支持配置 Presto 和 SparkSQL 参数。

    腾讯云产品 6天前
  • 数据开发治理平台 WeData TCHouse-P

    这篇说明如何向WeData工作流调度平台提交TCHouse-P任务,需先绑定引擎并设置权限,提供SQL示例演示库、Schema、表的创建及数据操作。 任务提交:需先绑定TCHouse-P引擎并设置数据库权限。 SQL操作:示例展示创建库、Schema、表及插入查询数据。

    腾讯云产品 6天前
  • 数据开发治理平台 WeData JDBC SQL

    这篇说明WeData工作流调度系统中SQL任务的提交与执行功能,支持多种数据源类型,需在数据源管理中预先创建连接。 数据源类型:支持达梦DM、腾讯云MySQL、ClickHouse、Oracle等十余种数据库。 核心操作:在SQL编辑区编写代码,支持保存、提交、测试运行及版本管理。

    腾讯云产品 6天前