云服务器特惠 99/年起
  1. 腾讯云优惠网首页
  2. 腾讯云产品

日志服务 规格与限制

• 腾讯云产品

这篇列出了腾讯云日志服务Kafka数据订阅任务在配置、采集和性能方面的主要限制，包括任务数量、Topic数、日志大小、吞吐量等关键指标。 配置与采集限制：单日志主题最多创建100个订阅任务，单任务最多消费100个Kafka Topic，单条日志不可超过1MB。 性能限制：单个任务最大吞吐240MB/s，单分区吞吐5MB/s，最大并发50个。

相关产品
日志服务 产品页，含版本规格、价格与购买入口。

一、配置限制

限制 说明
Kafka 数据订阅任务 单个日志主题最多可以创建100个 Kafka 数据订阅任务。

二、采集限制

限制 说明
Kafka Topic 单个 Kafka 数据订阅任务最多可以消费100个 Kafka Topic。
单条日志大小 单条日志不可超过1MB。单条日志大小超过限制时，该日志会被丢弃。
单条 Kafka 消息 单条 Kafka 消息中最多只可包含一条日志，若超出整条消息将被作为解析失败日志处理。
起始位置 仅支持指定最早和最晚位置。不支持从指定时间的位置开始导入。

三、性能限制

限制 说明
单个任务最大吞吐 单个任务最大吞吐不超过240MB/s。
单分区吞吐 最大5MB/s
最大并发数 最大50个并发（总吞吐250MB/s）

相关内容：

  1. 日志服务 通过 Kafka 数据订阅跨账号同步日志 在一些场景中， 我们可能需要将日志在不同账号的日志主题之间进行迁移与同步。这篇将介绍如何通过 Kafka 数据订阅功能实现将账号 A 的 a 日志主题中的日志同步至账号 B 的 b 日志主题。...
  2. 日志服务 使用 Kafka 数据订阅采集日志 日志服务（Cloud Log Service，CLS）目前已支持主动订阅自建 Kafka 或腾讯云 CKafka 生产的日志。这篇将介绍如何通过 Kafka 数据订阅将日志接入日志服务。...
  3. 日志服务 消费 Demo-流处理 这篇说说使用 Flink 和腾讯云 Oceanus 消费 CLS 日志的两种方式，包括通过 Oceanus SQL 作业和原生 Flink 注册 Kafka 表，均需配置 SASL 认证与消费组信息。 Oceanus 消费：在 Oceanus 控制台新建 SQL 作业，编写含 SASL 认证的 Kafka 表 SQL 语句。 Flink 消费：开启 CLS 日志的 Kafka 消费协议，在 Flink SQL 中注册。...
  4. 日志服务 采集 Windows 环境日志至 CLS 这篇指导你使用 Winlogbeat 或者 Filebeat 采集 Windows 环境日志上传至 CLS。...
  5. 日志服务 AWS S3 数据导入规格限制 这篇列出了腾讯云日志服务的控制台、导入及性能限制，核心包括文件预览限1G以下，导入单文件不超5G，单日志最大1M，单分区吞吐5MB/s，最大并发50个。 导入限制：单文件超5G会忽略，单行日志超512KB截断，多行日志最大1M。 性能限制：单分区吞吐5MB/s，最大50并发（总吞吐250MB/s）。...
  6. 智能视图计算平台 规格与限制 这篇说说智能视图计算平台的使用前提、功能限制及支持地域。需企业实名认证账号，推流播流需备案域名；设备接入上限5000台，录像计划500个，事件保留30天；目前仅广州全量开放，上海北京重庆需白名单。 使用限制：设备5000台、组织9级、录像计划500个、下载带宽160Mbps。 地域支持：图像抓拍、视频水印、国标级联、视觉理解仅广州可用。...
  7. 对象存储 规格与限制 这篇列出了腾讯云对象存储（COS）的各项规格与限制，涵盖QPS、带宽、存储类型、存储桶、对象、访问策略及生命周期等关键参数，并说明了不同存储类型的计费规则。 QPS限制：读写类请求中国大陆公有云地域默认每存储桶30000QPS，其他地域默认3000QPS。 存储类型限制：低频存储不足30天按30天计费，归档存储不足90天按90天计费，深度归档存储不足180天按180天计费。 对象上传限制：API/SDK上传单个对象最。...
  8. 日志服务 消费 Demo-第三方软件 使用 Filebeat、 Logstash、Flume 消费日志，以及通过 HTTP 方式将你消费的日志发送至 SIEM（Splunk、Devo）。...
赞 (0)
上一篇 4天前
下一篇 4天前