日志服务 使用 Log4j Appender 上传日志

日志服务(Cloud Log Service,CLS)目前已支持使用 Log4j Appender 上传日志到 CLS。

相关产品
日志服务 产品页,含版本规格、价格与购买入口。

一、背景信息

Log4j 是 Apache 的一个开源项目。通过使用 Log4j,我们可以控制日志信息输送的目的地是控制台、文件、GUI 组件,甚至是套接口服务器、NT 的事件记录器、UNIX Syslog 守护进程等;我们可以控制每一条日志的输出格式;通过定义每一条日志信息的级别,我们可以更加细致地控制日志的生成过程。此外,我们还可以通过一个配置文件来灵活地进行配置,而不需要修改应用的代码。

Log4j 由三个重要的组件构成:

·日志信息的优先级
日志信息的优先级从高到低分别为 ERROR、WARN、INFO和DEBUG,分别用来指定这条日志信息的重要程度。

·日志信息的输出目的地
日志信息的输出目的地指定了日志将打印到控制台还是文件中。

·日志信息的输出格式
输出格式控制了日志信息的显示内容。

二、功能优势

·日志不落盘:产生数据通过网络发给服务端。

·无需改造:对已使用 Log4J 应用,只需简单配置即可采集。

·异步非阻塞:高并发设计,后台异步发送,适合高并发写入。

·资源可控制:可以通过参数控制 producer 用于缓存待发送数据的内存大小,同时还可以配置用于执行数据发送任务的线程数量。

·自动重试:对可重试的异常,支持配置重试次数。

·优雅关闭:退出前会将日志全量进行发送。

·感知日志上报结果:通过 org.apache.log4j.helpers.LogLog 记录运行过程中产生的异常,在默认情况下 LogLog 会将信息输出到控制台。

三、使用 Tencent CLS Log4j Appender

通过 Tencent CLS Log4j Appender,你可以控制日志的输出目的地为腾讯云日志服务。写入日志服务中的日志的样式如下:


字段 简介
__SOURCE__ 来源 IP
__FILENAME__ 文件名称
level 日志级别
location 日志打印语句的代码位置
message 日志内容
throwable 日志异常信息(只有记录了异常信息,这个字段才会出现)
thread 线程名称
time 日志打印时间(可以通过 timeFormat 或 timeZone 配置 time 字段呈现的格式和时区)
log 自定义日志格式

四、maven 工程中引入依赖

<dependency> <groupId>com.tencentcloudapi.cls</groupId> <artifactId>tencentcloud-cls-log4j-appender</artifactId> <version>1.0.3</version></dependency>

五、修改 Log4J 配置文件

#loghubAppenderlog4j.appender.loghubAppender=com.tencentcloudapi.cls.LoghubAppender#日志服务的 http 地址,必选参数log4j.appender.loghubAppender.endpoint=ap-guangzhou.cls.tencentcs.com#用户身份标识,必选参数#请确保用户身份标识(密钥)关联的账号具有相应的SDK日志上传权限,查看权限策略前往https://cloud.tencent.com/document/product/614/68374#.E4.BD.BF.E7.94.A8-api-.E4.B8.8A.E4.BC.A0.E6.95.B0.E6.8D.AE >log4j.appender.loghubAppender.accessKeyId=log4j.appender.loghubAppender.accessKeySecret=#设置log字段的格式,必选参数log4j.appender.loghubAppender.layout=org.apache.log4j.PatternLayoutlog4j.appender.loghubAppender.layout.ConversionPattern=%-4r [%t] %-5p %c %x – %m%n#指定日志主题,必选参数log4j.appender.loghubAppender.topicID =#指定日志来源,可选参数log4j.appender.loghubAppender.source =#单个 producer 实例能缓存的日志大小上限,默认为 100MB。log4j.appender.loghubAppender.totalSizeInBytes=104857600#如果 producer 可用空间不足,调用者在 send 方法上的最大阻塞时间,默认为 60 秒。为了不阻塞打印日志的线程,强烈建议将该值设置成 0。log4j.appender.loghubAppender.maxBlockMs=0#执行日志发送任务的线程池大小,默认为可用处理器个数。log4j.appender.loghubAppender.sendThreadCount=8#当一个 ProducerBatch 中缓存的日志大小大于等于 batchSizeThresholdInBytes 时,该 batch 将被发送,默认为 512 KB,最大可设置成 5MB。log4j.appender.loghubAppender.batchSizeThresholdInBytes=524288#当一个 ProducerBatch 中缓存的日志条数大于等于 batchCountThreshold 时,该 batch 将被发送,默认为 4096,最大可设置成 40960。log4j.appender.loghubAppender.batchCountThreshold=4096#一个 ProducerBatch 从创建到可发送的逗留时间,默认为 2 秒,最小可设置成 100 毫秒。log4j.appender.loghubAppender.lingerMs=2000#如果某个 ProducerBatch 首次发送失败,能够对其重试的次数,默认为 10 次。#如果 retries 小于等于 0,该 ProducerBatch 首次发送失败后将直接进入失败队列。log4j.appender.loghubAppender.retries=10#该参数越大能让你追溯更多的信息,但同时也会消耗更多的内存。log4j.appender.loghubAppender.maxReservedAttempts=11#首次重试的退避时间,默认为 100 毫秒。#Producer 采用指数退避算法,第 N 次重试的计划等待时间为 baseRetryBackoffMs * 2^(N-1)。log4j.appender.loghubAppender.baseRetryBackoffMs=100#重试的最大退避时间,默认为 50 秒。log4j.appender.loghubAppender.maxRetryBackoffMs=50000#设置时间格式,可选参数log4j.appender.loghubAppender.timeFormat=yyyy-MM-dd'T'HH:mm:ssZ#设置时区为东八区,可选参数log4j.appender.loghubAppender.timeZone=Asia/Shanghai#输出 DEBUG 级别及以上的消息log4j.appender.loghubAppender.Threshold=DEBUG

六、Log4j Appender SDK

·Log4j 1.x版本:请使用 tencentcloud-cls-log4j-appender。

·Log4j 2.x版本:请使用 tencentcloud-cls-log4j2-appender。

赞 (0)
上一篇 4天前
下一篇 4天前