yun
-
流计算 Oceanus 开发 JAR 作业
这篇说说腾讯云流计算 Oceanus 创建及开发 JAR 作业的完整流程,包括前提条件、作业创建、JAR 包开发与上传、作业参数配置(引用程序包、配置文件、内置 Connector、运行日志、高级参数、规格与并行度)及从快照恢复等关键操作。 – 创建与开发作业:需先有独享集群,在控制台新建 JAR 作业后进入草稿状态进行开发。 – JAR 包使用与参数配置:本地编译上传 JAR 包,选择主程序包、主类及入参,并在作业。
-
流计算 Oceanus 扩容集群
登录 流计算 Oceanus 控制台,在计算资源的集群列表中找到要扩容的集群,点击集群名称进入集群详情页,点击右上角的调整配置按钮,即可对集群进行扩容设置。将 CU 数量调至要扩容至的数量(不是要增加的数量,而是扩容后集群新的可用的总 CU 数),调整完毕并确认费用后,勾选“我已阅读并同意包年包月集群调整配置费用说明”,然后单击确定。确认订单并支付成功后,集群即开始扩容进程。扩容期间,集群上的作业不受影响,也可以继续。
-
流计算 Oceanus 销毁集群
对于不使用的集群,可以对集群进行销毁,需注意的是作业是附属于集群的资源,销毁集群的同时将停止并删除集群上的所有作业,并且不可恢复,请谨慎操作。1. 登录 流计算 Oceanus 控制台,在计算资源的集群列表中找到要销毁的集群,选择更多操作,在下拉框中单击销毁。2. 在打开的弹窗中确认要销毁的集群信息,以及集群上的作业数,勾选“我已阅读并同意销毁集群和退费说明”。3. 单击确定即开始销毁集群。销毁集群可能产生退费,具体。
-
流计算 Oceanus 退费说明
包年包月集群在到期日之前主动销毁可能产生退费。如果你在购买流计算 Oceanus 集群后有任何不满意,可以在5天内自助退货退款,可以以享受1个流计算集群5天无理由退货,已支付的有效金额将返还至你的腾讯云账户(折扣或代金券不予以退还)。除此之外,还可享受普通自助退还,扣除你已使用的费用,以赠送金(不可提现、消耗后不可开票)的方式返还到你的账户。集群销毁和退费流程可在 流计算 Oceanus 控制台 内操作,详情可参考 。
-
流计算 Oceanus 数据库 MySQL CDC
MySQL 的 CDC 源表,支持对 MySQL 数据库的全量和增量读取,并保证 Exactly Once 语义。MySQL CDC 底层使用了 Debezium 来实现对变更数据流的实时抓取(Change Data Capture)。
-
流计算 Oceanus 数据仓库 ClickHouse
ClickHouse Sink Connector 提供了对 ClickHouse 数据仓库的写入支持。ClickHouse Source Connector 提供了 ClickHouse 作为批数据源和维表的功能。
-
流计算 Oceanus 作业高级参数
用户可在作业参数 > 高级参数中配置更多自定义 Flink 参数来实现作业行为的微调,例如设置作业的重启策略、调整 SQL 的 Mini-Batch 配置、关闭异步快照、设置快照最小间隔、调整 RocksDB StateBackend 的缓存大小等。
-
流计算 Oceanus 文件系统 FileSystem
这篇说说腾讯云流计算 Oceanus 的 FileSystem connector,支持将数据写入 HDFS 和 COS,并详细说明了不同 Flink 版本支持情况、DDL 定义、WITH 参数配置、HDFS 与 COS 的配置方法及 Kerberos 认证授权。 版本与支持:Flink 1.13 支持 lzo/snappy 压缩,1.14 及以上版本不支持;支持 CSV、JSON、Avro 等格式写入。 HDFS 。
-
流计算 Oceanus 日志诊断指南
这篇说说腾讯云流计算 Oceanus 的启动日志与运行日志,并列出常见异常关键字(如OOM、快照失败、超时)及可忽略的报错信息,帮助用户定位作业失败原因。 启动日志:作业启动过程中生成,失败时控制台有⚠️提示。 运行日志:作业运行中JobManager和TaskManager打印的日志。 常见异常:通过关键字如from RUNNING to FAILED、OutOfMemoryError等搜索故障。
-
流计算 Oceanus 作业最大并行度
每个 Flink 作业都有一个名为最大并行度(Maximum Parallelism,简称 MaxParallelism)的属性,它决定了 Flink 作业无损扩容的上限。