腾讯云产品

  • 日志服务 SQL 案例

    使用 SQL 对日志进行统计分析极为灵活,能够满足绝大多数的统计分析需求,但是 SQL 语法较为复杂,不易上手,这里说明常用 SQL 案例以供参考。

    腾讯云产品 6天前
  • 日志服务 消费 Demo-消费预过滤

    这篇说说如何使用Python SDK实现腾讯云日志服务(CLS)的数据预过滤与消费,通过配置query参数可在服务端过滤日志后再消费,节省带宽,并给出消费者类实现示例及消费任务启动配置。 预过滤:配置query参数实现,不配置则全量消费。 消费者实现:继承ConsumerProcessorBase类,在process方法中处理日志数据。 并发建议:消费者数量应与日志主题分区数保持一致。

    腾讯云产品 6天前
  • 日志服务 使用多行全文提取模式采集日志

    多行全文日志是指一条完整的日志数据跨占多行(例如 Java 程序日志)。在这种情况下,以换行符\\n 为日志的结束标识符就显得有些不合理,为了能让日志系统明确区分开每条日志,采用首行正则的方式进行匹配,当某行日志匹配上预先设置的正则表达式,就认为是一条日志的开头,而下一个行首出现时,作为该条日志的结束标识符。

    腾讯云产品 6天前
  • 日志服务 Logstash 日志上传

    CLS 日志服务支持通过以下两种 Logstash 插件将 Logstash 采集的日志上传至 CLS 日志服务。

    腾讯云产品 6天前
  • 日志服务 通过 AWS S3导入数据

    日志服务(Cloud Log Service,CLS)支持将 AWS S3 存储桶中的日志文件导入日志主题,并对导入后的日志进行检索分析。你只需要在日志服务控制台进行简单的配置即可完成数据导入。

    腾讯云产品 6天前
  • 日志服务 资源函数

    这篇说说腾讯云日志服务CLS数据加工中res_local和res_rds_mysql两个函数。res_local用于拉取高级配置的环境变量;res_rds_mysql用于从云MySQL拉取数据,支持全量与增量拉取,常与t_table_map实现维度表关联,并给出性能、费用及数据安全说明。 res_local函数:通过指定参数从高级配置中获取环境变量值,支持设置默认值和输出格式。 res_rds_mysql函数:从My。

    腾讯云产品 6天前
  • 日志服务 数据加工可观测

    数据加工可观测是 CLS 为数据加工任务提供的运行时观测能力。数据加工任务在读取源日志主题、执行加工规则、写入目标日志主题的过程中,会持续上报运行状态、处理量、处理时延等运行数据, 然后存储到 CLS 内置的服务日志主题(cls_service_log),可通过日志检索、SQL 分析、仪表盘、告警策略实时观测每一个加工任务的运行状态。

    腾讯云产品 6天前
  • 日志服务 应用中心

    应用中心是基于日志服务构建的统一应用可观测平台,通过对应用日志、指标和使用情况等多维度数据的深度关联分析,提供全面的应用用量分析、性能监控、安全审计、数据保护、异常检测和访问分析等服务。帮助你快速构建应用的可观测性,提升云资源的使用效率和安全性,助力企业在数字化转型过程中实现更高的业务价值。

    腾讯云产品 6天前
  • 日志服务 MAP 函数

    MAP 函数和运算符的基本语法及示例。MAP 函数和运算符使用 MAP 类型,键必须是字符类型且不能为 null,值允许为 null。

    腾讯云产品 6天前
  • 日志服务 投递任务管理

    2. 在左侧导航栏中,选择投递任务,进入投递任务管理页面。3. 在投递任务管理页面,选择投递任务的地域、主题类型(日志主题)、日志集、日志主题,查看投递至 COS 任务的列表。

    腾讯云产品 6天前