漫话：应用程序被拖慢？罪魁祸首竟然是Log4j！

分手后的思念是犯贱 2023-10-05 08:57 26阅读 0赞

![format_png][]

![format_png 1][]

![format_png 2][]

![format_png 3][]

![format_png 4][]

之前一段时间，为我们发现的一个SaaS应用程序会间歇性地卡顿、变慢，因为很长时间都没有定位到原因，所以解决的办法就只能是重启。

这个现象和之前我们遇到的程序变得卡顿不太一样，因为我们发现**这个应用程序不仅在高流量期间时会变慢，有时在低流量时期也会变慢。**所以这令大家都很奇怪。

这类应用程序的变慢，重新启动之后就可以维持一段时间，但是过段时间又有可能会再次出现。

![format_png 5][]

![format_png 6][]

![format_png 7][]

![format_png 8][]

故障排除

当我们准备排查这个问题的时候，我们在应用程序速度很慢的时候，尝试着捕获了这个应用程序的线程Dump。有很多种方式来捕获线程转Dump，我们选择了“jstack”工具来获取。

> 在问题发生时获得线程Dump是非常关键的！

然后我们将捕获的线程Dump上传到一个线上线程Dump分析工具（https://fastthread.io/）。该工具立即帮我们生成了一份报告。

报告立即找出了问题的根本原因。分析工具上显示“http-nio-8080-exec-121”线程阻塞了100多个线程。下面是传递依赖图，展示了阻塞线程:

![format_png 9][]

从图中可以看到100多个线程被“http-nio-8080-exec-121”线程阻塞。当我们点击图中的“http-nio-8080-exec-121”超链接时，它会打印出线程的堆栈轨迹:

![format_png 10][]

仔细观察图中被框出来的部分，你可以看到该线程已经获取到`org.apache.log4j.Logger`的锁，正在进行其他的操作。

接下来，我们随便找一个被"http-nio-8080-exec-121"阻塞的线程，看一下他的堆栈信息：

![format_png 11][]

看一下上面堆栈跟踪中被框出来的部分。我们可以看到“http-nio-8080-exec-56”当前正处于阻塞（BLOCKED）状态，而阻塞的原因是它正在等待获取`org.apache.log4j.Logger`的锁。

前面我们刚刚分析过，“http-nio-8080-exec-121”获得了org.apache.log4j.Logger的锁，正在进行其他操作，而锁并没有被释放，所以其他线程想要获得锁就只能被阻塞。

其余的所有被阻塞的线程也在等待获取`org.apache.log4j.Logger`的锁。因此，每当任何应用程序线程试图记录日志时，它都会因为无法获取到锁而进入阻塞状态。

![format_png 12][]

![format_png 13][]

![format_png 14][]

刚开始我们也没有太多的头绪，后来我们尝试借助Google的力量，然后我们用谷歌搜索了"org.apache.log4j.Logger 阻塞 线程"这样的关键字。

我们在Apache Log4j bug数据库中偶然发现了这个有趣的Bug，而且这个Bug早在2015年就被发现了。（https://bz.apache.org/bugzilla/show\_bug.cgi?id=57714 ）。

![format_png 15][]

![format_png 16][]

![format_png 17][]

**这是Log4J框架中已知的bug之一，也是开发新的Log4j2框架的主要原因之一。**

由于这个bug，任何试图打印日志的线程都进入了阻塞状态。它导致整个应用程序嘎然而止。一旦应用程序从Log4j迁移到Log4j2框架，问题就解决了。

结论

Log4j已经在2015年8月开始就不再被维护了。如果您的应用程序仍在使用Log4J框架，强烈建议升级到Log4j2框架。**Log4j2不仅仅是Log4j框架的下一个版本，它是一个从零开始编写的新框架，它有很多性能改进。**

最后，如果网站遇到程序被拖慢的问题，那么也可以考虑一下这个因素。

![format_png 18][]

![format_png 19][]

![format_png 20][]

![format_png 21][]

![format_png 22][]

**文末福利**：我整理了一份 280 多页的《JAVA核心面试知识整理.pdf》，包含了：Java 集合、Java 基础、JVM、并发编程、Spring 原理、Netty、网络、Kafka、Zookeeper、RabbitMQ、设计模式、数据库、数据结构和算法等面试题。

**下载方式**

***1.*** **首先扫描下方二维码**

***2.*** **后台回复「****面试****」即可获取**

![format_png 23][]

注明：仅仅作为知识分享，切勿用于其它商业活动 。感谢所有技术分享者的付出。

[format_png]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYWliUG11cmg2Z1NaTjRtTm03Z0NhRFZiQjI2b3VwM29TQURqRFNoNlBuWU5BTU9OZjFyUVJaUncvNjQw?x-oss-process=image/format,png
[format_png 1]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYUc1SWdMNTdBY1R2QUJselNlWHJrNmNKQlYyT0w3WTE2bkd6Sng1S3U1TkJsQ290NmljNXZSZmcvNjQw?x-oss-process=image/format,png
[format_png 2]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYXk3Sm9SM1M3Wm1tZTNPNG4zaWNGRVN6aWI2cnpZZWJPbm9TdlhoU1VTeE9JNFBYQk5VcThpY2V0US82NDA?x-oss-process=image/format,png
[format_png 3]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYVhobmQ5cGpDaWJRaWN2MFIzdlFjeGNvVnRFQmN3MGtnSEJDdVhWNHBieWd0Z0UwRWtjdkVxczR3LzY0MA?x-oss-process=image/format,png
[format_png 4]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYWlhVG1YTTdlWkp4V2MzRWVsbnJQMWdrOVhZRWpxaWJDRTBvTGlhRjhDUjNpYWZxaFdJbktYa1E4ZHcvNjQw?x-oss-process=image/format,png
[format_png 5]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYVhUWXM1bmdudFcwdGljZHVqUUJTajF2S1AwVjBaODJhcVlUS09ISEF3RGtHU011bm1sSVdrVXcvNjQw?x-oss-process=image/format,png
[format_png 6]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYVlrT0p2N2tLbWhydGtIeGljMFFTVFdabEhYcXdLTkZpYUZHeU1PUUN1TWlhczZkS1I2WFh2NEFxQS82NDA?x-oss-process=image/format,png
[format_png 7]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYTFZODlTZGE3RGpycXppYW5LQ2liQ3NHcVh6ZWdMbDQ4R0ZNWW9pY3Y4YWJueThhdTE2SlFlSnRaZy82NDA?x-oss-process=image/format,png
[format_png 8]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYUtUc3pLV1ZDMHBjdVkzempQTUZuTGZCQWoySjU1Zkx4dEJWOVQzbGFpY2szcWliT3dDaDAyVmNnLzY0MA?x-oss-process=image/format,png
[format_png 9]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYXlVdGRrNGdUdGRSZTF0R2FTN1pKdTN3ZUxHT1ZoYmdQRTBpYUNmQVltaWJCaWI3a3hkQk03cWlhMEEvNjQw?x-oss-process=image/format,png
[format_png 10]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYThNSmljZjhIVW5rcHdCdHRFbjVYMURiWnZiamFkZ043U1JEdkQ4RzJaT1V2bEFMa0RGamdGNmcvNjQw?x-oss-process=image/format,png
[format_png 11]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYVl1RzR1djJKTzdmWlBiVzFyQ2JSUEEwNGlicmtjVHlUdzlWdnFSbzFzaWNmZm5oZ0xXM01EU0lBLzY0MA?x-oss-process=image/format,png
[format_png 12]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYTl3UDU2d2RGaWFnbGliTlFVQm8xQ0xDaHBCNHdUaWE1WjloaWJsTmNzTlpzb042R1BpY2lhUUhqVzdjUS82NDA?x-oss-process=image/format,png
[format_png 13]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYXhUUXBLMFZ3N2ljWXUyVjcxdTBRVkl0ZEw2TFBpYWdQQjlTQ0JOZUx0djhjOGQ0N3FsTEpySGdnLzY0MA?x-oss-process=image/format,png
[format_png 14]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYWoySk9jaGxFM0FIVzJ1NFI5VUIxQTBVTWJpYkt0Q2cxRXVlNDRncDR5R3VadzRhSXR3OElCREEvNjQw?x-oss-process=image/format,png
[format_png 15]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYTZWanVCeFpYNWhXbDkyRU93bkZiU0J0anpGaWFQVXBqNU5yQ2hZZklTRkwyNTlaVWlhdjFCc1lRLzY0MA?x-oss-process=image/format,png
[format_png 16]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYU5DbEdQaWNTUjNiTjVyOWxpYkduVkJxVTJ0QVo5Rk9JZHAweWw0OVZvTGliUmNtWU5pYnhrWXpkeWcvNjQw?x-oss-process=image/format,png
[format_png 17]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYU5pY0J4NFhkd1dXaWJMc1doRGFYTVhUY1VTdjBhazRFbUpNaHZwckU1UmxuSDM3RGFiTnpaNHlRLzY0MA?x-oss-process=image/format,png
[format_png 18]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYVBObTdDdjhGamtHVG9NSjVnTzdSTzNseWpnY2hub25WMkpIdDdkRFpxdmliQXA1RVV6azlYM1EvNjQw?x-oss-process=image/format,png
[format_png 19]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYWt2VVpYZmJMTHFKaHVrYzhZS1dvN2xiR2RybUoyU2JKdXJkRlkwenhJQVRTMndFd3YxdXJOUS82NDA?x-oss-process=image/format,png
[format_png 20]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYU52dnBvUGw5VmliRWs1b090UkRpYXFOMUFDVGlhb2dINWZEaWJQM2FaRmlhUktxcGtZbU1ud2liUUM3dy82NDA?x-oss-process=image/format,png
[format_png 21]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2pwZy9DMXVETURxam4xaWNjcnhhQmNycE94NklTMGljazlsYndpYURyRU9USG04YlNmVmpxRGh6NDA2aWNkUnBvT2ljTGFzUTQwOGVOaWNXRmlhYklqMklHSkJKMkJpYnZ3LzY0MA?x-oss-process=image/format,png
[format_png 22]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X2dpZi9iOTZDaWJDdDcwaWFid2p5b2pMaEEwM1B0eFVua05QUkVudDJGNDh5d2ZYTHBEZERBamljT1RQSThROTR0VkxiSjU4dGJSczEyaWFYREtoVU9XOWdkNE5sRkEvNjQw?x-oss-process=image/format,png
[format_png 23]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9tbWJpei5xcGljLmNuL21tYml6X3BuZy9HSnZ1V2lhTURaa0JmMUdTTjI5MENIWWQ1QWZPV0hoUlBWOUx3M2ljYmliaWNFbE02NjVEYnh3Y1hEV01NaWF6Z2lhOUdrV0ZpYzIxaDNIYjZGRXpUWTVZM2pQbWcvNjQw?x-oss-process=image/format,png