摘要:框架会默认加载下命名为或的配置文件。采用异步写日志的方式而不让此次写日志发生磁盘,阻塞线程从而造成不必要的性能损耗。
通过阅读本篇文章将了解到
1.日志输出到文件并根据LEVEL级别将日志分类保存到不同文件
2.通过异步输出日志减少磁盘IO提高性能
3.异步输出日志的原理
配置文件logback-spring.xmlSpringBoot工程自带logback和slf4j的依赖,所以重点放在编写配置文件上,需要引入什么依赖,日志依赖冲突统统都不需要我们管了。logback框架会默认加载classpath下命名为logback-spring或logback的配置文件。将所有日志都存储在一个文件中文件大小也随着应用的运行越来越大并且不好排查问题,正确的做法应该是将error日志和其他日志分开,并且不同级别的日志根据时间段进行记录存储。
[%d{yyyy-MM-dd" "HH:mm:ss.sss}] [%C] [%t] [%L] [%-5p] %m%n ERROR DENY ACCEPT [%d{yyyy-MM-dd" "HH:mm:ss.sss}] [%C] [%t] [%L] [%-5p] %m%n ${LOG_INFO_HOME}//%d.log 30 ERROR [%d{yyyy-MM-dd" "HH:mm:ss.sss}] [%C] [%t] [%L] [%-5p] %m%n ${LOG_ERROR_HOME}//%d.log 30
部分标签说明
标签,必填标签,用来指定最基础的日志输出级别
标签,通过使用该标签指定日志的收集策略
name属性指定appender命名
class属性指定输出策略,通常有两种,控制台输出和文件输出,文件输出就是将日志进行一个持久化。ConsoleAppender将日志输出到控制台
标签,通过使用该标签指定过滤策略
标签指定收集策略,比如基于时间进行收集
之前的日志配置方式是基于同步的,每次日志输出到文件都会进行一次磁盘IO。采用异步写日志的方式而不让此次写日志发生磁盘IO,阻塞线程从而造成不必要的性能损耗。异步输出日志的方式很简单,添加一个基于异步写日志的appender,并指向原先配置的appender即可
异步输出日志性能测试0 256 0 256
既然能提高性能的话,必须进行一次测试比对,同步和异步输出日志性能到底能提升多少倍?
CPU六核
内存 8G
Apache Jmeter
线程数:100
Ramp-Up Loop(可以理解为启动线程所用时间) :0 可以理解为100个线程同时启用
测试结果
重点关注指标
Throughput【TPS】
吞吐量:系统在单位时间内处理请求的数量,在同步输出日志中
TPS
为
44.2/sec
线程数 100
Ramp-Up Loop:0
测试结果
TPS
为
497.5/sec
,
性能提升了10多倍!!!
异步日志输出原理从logback框架下的Logger.info方法开始追踪。一路的方法调用路径如下图所示:
异步输出日志中最关键的就是配置文件中ch.qos.logback.classic`AsyncAppenderBase`append
protected void append(E eventObject) { if(!this.isQueueBelowDiscardingThreshold() || !this.isDiscardable(eventObject)) { this.preprocess(eventObject); this.put(eventObject); } }
通过队列情况判断是否需要丢弃日志,不丢弃的话将它放到阻塞队列中,通过查看代码,这个阻塞队列为ArrayBlockingQueueu,默认大小为256,可以通过配置文件进行修改。Logger.info(...)到append(...)就结束了,只做了将日志塞入到阻塞队列的事,然后继续执行Logger.info(...)下面的语句了。 在AsyncAppenderBase类中定义了一个Worker线程,run方法中的关键部分代码如下:
E e = parent.blockingQueue.take(); aai.appendLoopOnAppenders(e);
从阻塞队列中取出一个日志,并调用AppenderAttachableImpl类中的appendLoopOnAppenders方法维护一个Append列表。Worker线程中调用方法过程主要如下图:
最主要的两个方法就是encode`write`encode
作者:何甜甜在吗链接:https://juejin.im/post/5d4d61...
最后附:项目完整代码
[%d{yyyy-MM-dd" "HH:mm:ss.sss}] [%C] [%t] [%L] [%-5p] %m%n ERROR DENY ACCEPT [%d{yyyy-MM-dd" "HH:mm:ss.sss}] [%C] [%t] [%L] [%-5p] %m%n ${LOG_INFO_HOME}//%d.log 30 ERROR [%d{yyyy-MM-dd" "HH:mm:ss.sss}] [%C] [%t] [%L] [%-5p] %m%n ${LOG_ERROR_HOME}//%d.log 30 0 256 0 256
LOG_ERROR_HOME=C://Users//hetiantian//Desktop//log//error LOG_INFO_HOME=C://Users//hetiantian//Desktop//log//info
文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。
转载请注明本文地址:https://www.ucloud.cn/yun/76088.html
摘要:框架会默认加载下命名为或的配置文件。采用异步写日志的方式而不让此次写日志发生磁盘,阻塞线程从而造成不必要的性能损耗。 通过阅读本篇文章将了解到 1.日志输出到文件并根据LEVEL级别将日志分类保存到不同文件 2.通过异步输出日志减少磁盘IO提高性能 3.异步输出日志的原理 配置文件logback-spring.xml SpringBoot工程自带logback和slf4j的依赖,所...
摘要:由于不是线程安全的,故在方法上增加了同步操作,造成竞争等待。至此,整个多线程调优结束,通过充分优化同步竞争的方式,最终使得分线程记录日志的性能比最原始的多线程写同一文件提高了倍去锁提高到倍,替换提高倍 背景 在一次项目的性能调优中,发现出现竞争瓶颈,导致在资源未使用满的情况下,TPS已经无法提升。祭起JMC(JAVA MISSON CONTROL)飞行记录器大法后,发现线程集中等待...
摘要:的测试完全不同级别的。记录请求的级别在高于或等于其的有效级别时被称为被启用,否则,称为被禁用。该规则是的核心。指定名称,指定的全限定名。对记录事件进行格式化。查看当前活动文件的大小,如果超过指定大小会告知触发当前活动文件滚动。 一、logback的介绍 Logback是由log4j创始人设计的又一个开源日志组件,官方网站: http://logback.qos.ch。 logback当...
摘要:尝试检测着色功能是否可用。禁用颜色的输出。目前支持的颜色有文件保存默认情况下,仅将日志输出到控制台,不会写入到日志文件中去。如果除了控制台输出之外还想写日志文件,则需要在设置或属性。默认情况它会根据日志的依赖自动加载。 SpringBoot 是为了简化 Spring 应用的创建、运行、调试、部署等一系列问题而诞生的产物,自动装配的特性让我们可以更好的关注业务本身而不是外部的XML配置...
阅读 1597·2023-04-25 14:12
阅读 1069·2021-08-27 16:24
阅读 2532·2019-08-30 15:44
阅读 2911·2019-08-30 13:16
阅读 1664·2019-08-29 14:10
阅读 964·2019-08-29 13:54
阅读 1295·2019-08-29 13:09
阅读 1801·2019-08-26 18:37