Java学习-046-日志抓取合并后排序问题解决方案之 --- log4j 二次定制，实现日志输出添加延时10ms

时间：2022-09-05 22:44:01

自3月25至今，已经好久没有写学习日志了，今天在写日志抓取合并的小方法，发现抓取后的日志并米有依据系统执行的日志顺序排序。日志抓取排列逻辑如下：

  1. 通过日志标识，从各个日志文件（例如 use.log，error.log 等）中获取所需日志列表
  2. 合并日志列表
  3. 升序排序
  4. 输出日志报告

结果最后获取日志信息后，发现实际产出结果与预期结果不相符，如下所示：

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:] - [] 开始生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | -- :: | 是】概要报告 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:] - [] 成功生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | -- :: | 是】概要报告 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:] - [] 开始生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | -- :: | 是】断言报告 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:] - [] 成功生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | -- :: | 是】断言报告 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:] - [] 开始生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | -- :: | 是】请求响应报告 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:] - [] 开始生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | -- :: | 是】请求报告 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:] - [] 成功生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | -- :: | 是】请求报告 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:] - [] 开始生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | -- :: | 是】请求参数报告 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:] - [] 成功生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | -- :: | 是】请求参数报告 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:] - [] 开始生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | -- :: | 是】请求主体报告 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:] - [] 成功生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | -- :: | 是】请求主体报告 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:] - [] 开始生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | -- :: | 是】日志报告 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:] - [] 成功生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | -- :: | 是】请求响应报告 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.util.IpUtils:] - [] 成功获取主机IP地址...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.util.IpUtils:] - [] 成功获取主机IP地址...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.util.IpUtils:] - [] 开始通过主机域名【mb.ffp.com】获取对应的地址对象 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.util.IpUtils:] - [] 成功通过主机域名【mb.ffp.com】获取对应的地址对象 ...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.util.IpUtils:] - [] 开始获取主机IP地址...

 -- ::, - INFO  - [main] [cn.ffp.autotest.api.util.IpUtils:] - [] 开始获取主机IP地址...

通过日志可以发现，排序时起决定作用的日志时间影响较大，系统运算速度越快，产生相同时间开头的日志就越多，因而影响了最终的排序结果。

如何才能解决呢？我想出了如下的解决方案：

  1. 将所有的日志信息统一输出到一个文件中，只需要依次获取日志输出即可
  2. 创建自己的日志模块取代 log4j
  3. 日志排序打标，即：在每个日志字符串前添加一个唯一 ID，通过此 ID 进行排序
  4. 二次编译 log4j 的源码在 debug、info、warn、error、fatal 方法中添加延时

再三思索下，决定采用第四种解决方案。原因如下：

  1. 所有日志信息输出到同一文件，日志文件较大，且不符合日志分类习惯
  2. 耗时较长（主要是有很多开源的日志构件，自己再开发，觉得浪费时间，哈哈哈）
  3. 日志打标需要在每个日志输出的地方添加标识，因方法或语句块会被多次执行，此方案直接KO
  4. 省时省力，只是需要牺牲点时间（个人觉得此方案比其他方案会更优）

经过查询 log4j 的api 发现，上述日志方法在 org\apache\log4j\Category.java 文件中，具体延时时间依据实际需要自行酌情设置即可，添加或修改如下所示代码（info、warn、error、fatal 方法参考修改即可）：

package org.apache.log4j;

import org.apache.log4j.spi.AppenderAttachable;

import org.apache.log4j.spi.LoggingEvent;

import org.apache.log4j.spi.LoggerRepository;

import org.apache.log4j.spi.HierarchyEventListener;

import org.apache.log4j.helpers.NullEnumeration;

import org.apache.log4j.helpers.AppenderAttachableImpl;

import java.util.Enumeration;

import java.util.MissingResourceException;

import java.util.ResourceBundle;

import java.util.Vector;

public class Category implements AppenderAttachable {

    /**

     * Aaron.ffp 2016-04-10 add log delay time 10ms

     * reference：debug、info、warn、error、fatal

     */

    protected long              delay    = 10;

    public void debug(Object message) {

        try {

            Thread.sleep(delay);

        } catch (InterruptedException e) {

        }

        if (repository.isDisabled(Level.DEBUG_INT))

            return;

        if (Level.DEBUG.isGreaterOrEqual(this.getEffectiveLevel())) {

            forcedLog(FQCN, Level.DEBUG, message, null);

        }

    }

    public void debug(Object message, Throwable t) {

        try {

            Thread.sleep(delay);

        } catch (InterruptedException e) {

        }

        if (repository.isDisabled(Level.DEBUG_INT))

            return;

        if (Level.DEBUG.isGreaterOrEqual(this.getEffectiveLevel()))

            forcedLog(FQCN, Level.DEBUG, message, t);

    }

}

　　下载 log4j-1.2.17.jar ，对其进行反编译（不会的请参阅我之前写的文章：Java学习-039-源码 jar 包的二次开发扩展实例（源码修改）），然后打包上传到私服，在 pom 文件中添加引用即可。

重新执行测试用例，得到的日志数据如下所示（此时获取的日志结果为期望结果，同时从日志中也可看出我们的日志延时输出已经生效）：

 2016-04-10 23:08:01,005 - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:151] - [1460300877526] 开始生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | 2016-03-29 00:03:34 | 是】概要报告 ...

 2016-04-10 23:08:01,015 - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:167] - [1460300877526] 成功生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | 2016-03-29 00:03:34 | 是】概要报告 ...

 2016-04-10 23:08:01,025 - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:187] - [1460300877526] 开始生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | 2016-03-29 00:03:34 | 是】断言报告 ...

 2016-04-10 23:08:01,035 - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:211] - [1460300877526] 成功生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | 2016-03-29 00:03:34 | 是】断言报告 ...

 2016-04-10 23:08:01,045 - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:358] - [1460300877526] 开始生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | 2016-03-29 00:03:34 | 是】请求报告 ...

 2016-04-10 23:08:01,055 - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:409] - [1460300877526] 开始生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | 2016-03-29 00:03:34 | 是】请求参数报告 ...

 2016-04-10 23:08:01,065 - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:426] - [1460300877526] 成功生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | 2016-03-29 00:03:34 | 是】请求参数报告 ...

 2016-04-10 23:08:01,075 - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:441] - [1460300877526] 开始生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | 2016-03-29 00:03:34 | 是】请求主体报告 ...

 2016-04-10 23:08:01,085 - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:446] - [1460300877526] 成功生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | 2016-03-29 00:03:34 | 是】请求主体报告 ...

 2016-04-10 23:08:01,095 - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:392] - [1460300877526] 成功生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | 2016-03-29 00:03:34 | 是】请求报告 ...

 2016-04-10 23:08:01,105 - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:286] - [1460300877526] 开始生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | 2016-03-29 00:03:34 | 是】请求响应报告 ...

 2016-04-10 23:08:01,205 - INFO  - [main] [cn.ffp.autotest.api.util.IpUtils:98] - [1460300877526] 开始获取主机IP地址...

 2016-04-10 23:08:01,215 - INFO  - [main] [cn.ffp.autotest.api.util.IpUtils:108] - [1460300877526] 成功获取主机IP地址...

 2016-04-10 23:08:01,225 - INFO  - [main] [cn.ffp.autotest.api.util.IpUtils:192] - [1460300877526] 开始通过主机域名【mb.ffp.com】获取对应的地址对象 ...

 2016-04-10 23:08:01,235 - INFO  - [main] [cn.ffp.autotest.api.util.IpUtils:197] - [1460300877526] 成功通过主机域名【mb.ffp.com】获取对应的地址对象 ...

 2016-04-10 23:08:01,245 - INFO  - [main] [cn.ffp.autotest.api.util.IpUtils:98] - [1460300877526] 开始获取主机IP地址...

 2016-04-10 23:08:01,255 - INFO  - [main] [cn.ffp.autotest.api.util.IpUtils:108] - [1460300877526] 成功获取主机IP地址...

 2016-04-10 23:08:01,265 - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:338] - [1460300877526] 成功生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | 2016-03-29 00:03:34 | 是】请求响应报告 ...

 2016-04-10 23:08:01,275 - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:261] - [1460300877526] 开始生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | 2016-03-29 00:03:34 | 是】日志报告 ...

 2016-04-10 23:08:01,305 - INFO  - [main] [cn.ffp.autotest.api.report.ReportHelper:266] - [1460300877526] 成功生成【Test_001_001 | 首页接口-导航栏配置 | 范丰平 | 2016-03-29 00:03:34 | 是】日志报告 ...

至此， Java学习-046-测试日志抓取合并、排序问题解决方案之 --- log4j 二次定制，实现日志输出添加延时10ms 顺利完结，希望此文能够给初学 Java 的您一份参考。

最后，非常感谢亲的驻足，希望此文能对亲有所帮助。热烈欢迎亲一起探讨，共同进步。非常感谢！ ^_^

Java学习-046-日志抓取合并后排序问题解决方案之 --- log4j 二次定制，实现日志输出添加延时10ms的更多相关文章

  1. java学习-GET方式抓取网页(UrlConnection和HttpClient)

    抓取网页其实就是模拟客户端(PC端,手机端...)发送请求,获得响应数据documentation,解析对应数据的过程.---自己理解,错误请告知 一般常用请求方式有GET,POST,HEAD三种 G ...

  2. Android全局异常处理 实现自己定义做强制退出和carsh日志抓取

    在做android项目开发时,大家都知道都会遇到程序报错或者Anr异常,会弹出来一个强制退出的弹出框,对于开发人员是好事,但是对于用户体验和 UI实在毫无违和感,别说用户接受不了,就连我们自己本身可能 ...

  3. adb命令 logcat日志抓取

    一.logcat抓log方法:adb logcat命令,可以加条件过滤 1.安装SDK(参考android sdk环境安装) 2.使用数据线链接手机,在手机助手的sdcard中建立一个1.log的文件 ...

  4. adb logcat日志抓取

    adb命令 logcat日志抓取 一.logcat抓log方法:adb logcat命令,可以加条件过滤 1.安装SDK(参考android sdk环境安装) 2.使用数据线链接手机,在手机助手的sd ...

  5. 用libvlc 抓取解码后的帧数据

    vlc是一套优秀的开源媒体库,其特点是提供了完整的流媒体框架, 用它可以非常方便的实现抓取解码帧的功能. 与此功能有关的关键API为 libvlc_video_set_callbacks /*设置回调 ...

  6. c#抓取网页内容乱码的解决方案

    写过爬虫的同学都知道,这是个很常见的问题了,一般处理思路是: 使用HttpWebRequest发送请求,HttpWebResponse来接收,判断HttpWebResponse中”Content-Ty ...

  7. JAVA使用Gecco爬虫 抓取网页内容(附Demo)

    JAVA 爬虫工具有挺多的,但是Gecco是一个挺轻量方便的工具. 先上项目结构图. 这是一个 JAVASE的 MAVEN 项目,要添加包依赖,其他就四个文件.log4j.properties 加上三 ...

  8. java网络爬虫----------简单抓取慕课网首页数据

    © 版权声明:本文为博主原创文章,转载请注明出处 一.分析 1.目标:抓取慕课网首页推荐课程的名称和描述信息 2.分析:浏览器F12分析得到,推荐课程的名称都放在class="course- ...

  9. Java广度优先爬虫示例(抓取复旦新闻信息)

    一.使用的技术 这个爬虫是近半个月前学习爬虫技术的一个小例子,比较简单,怕时间久了会忘,这里简单总结一下.主要用到的外部Jar包有HttpClient4.3.4,HtmlParser2.1,使用的开发 ...

随机推荐

  1. [WinAPI] API 4 [注册][创建][消息][第一个框架类窗口]

    首先注册了窗口类,然后创建了一个窗口,创建窗口时指定的窗口的属性和窗口消息的处理函数.函数消息的处理函数大多调用系统默认函数来处理. #include<windows.h> /*全局变量* ...

  2. 趣味C程序100&period;9 绘制杨辉三角

    说明:1.本问题来源于<C语言经典.趣味.实用程序设计编程百例精解>,所有程序为本人自己编写.与原程序不同之处作有标记. 2.本系列所有程序均使用codeblocks编译,操作系统为Win ...

  3. HDU2058

    The sum problem Time Limit: 5000/1000 MS (Java/Others)    Memory Limit: 32768/32768 K (Java/Others) ...

  4. final＋基本类型导致只编译常量类引起的错误

    http://jackyrong.iteye.com/blog/1813878 字节码问题.

  5. Android开发学习之路--Notification之初体验

    一般当我们收到短信啊,微信啊,或者有些app的提醒,我们都会在通知栏收到一天简单的消息,然后点击消息进入到app里面,其实android中有专门的Notification的类可以完成这个工作,这里就实 ...

  6. Unity Shader Graph 小功能实现（一）边缘发光

    在Unity 2018.2 版本正式启用了高清渲染管线,shader可视化编程. 现在我们就尝尝鲜,来实现了个物体边缘发光的shader效果. 准备 点击Windos->Package Mang ...

  7. &lbrack;curl&rsqb;convert curl to python Ruby

    https://curl.trillworks.com/

  8. UCloud 机房的网络搭建（计蒜客初赛第五场）

    UCloud 刚刚建立一个新机房,近日正在进行网络搭建.机房内有 nn 台服务器和 mm 个分线器,整个机房只有一个网线出口.分线器的作用是将一根网线转换成多根网线.蒜头君也知道每个分线器输出的最大网 ...

  9. 【读书笔记】iOS-微信公众平台开发最佳实践

    一,微信是由腾讯公司广州研发中心产品团队开发,该团队经理张小龙被称为“微信之父”,公司总裁马化腾确定该产品名称为“微信”. 二,常见问题及解决方案. 1,请求URL超时. 这种情况一般是由于服务器网速 ...

  10. ASP&period;NET开发，且编且改，分清职责

    本篇Insus.NET使用一个实例,分享在ASP.NET开发时,一个功能一个方法(函数),且编且改,一步一个脚印把实例完成.在方法多变多形式的情况之下,怎样把写出来程序简单明了. 下面是一个Excel ...

相关文章