文档章节

lightweight java profiler与java flame graph初了解

dokia
 dokia
发布于 2015/12/29 10:20
字数 825
阅读 164
收藏 1

了解java程序中CPU占用情况对于java程序开发,尤其是后台服务开发来说是一件必要且重要的事情。在分析高并发下服务性能压力时,需要了解程序中长时间占用CPU的程序块。这需要我们使用分析器(profiler)在java进程运行的过程中定时抽样分析。

lightweight java profiler是一种针对java的轻量级分析器,使用步骤简单,共分为两步:

  1. 获得源码,make all,在build-32/build-64目录下生存liblagent.so库文件

  2. 执行java程序,并将此库文件作为-agentpath加入java虚拟机选项中去

运行一段时间后退出java程序,java程序根目录下会生成跟踪文件traces.txt,里面记录了定时抽样获得的java堆栈信息。

分析器默认参数:

// Number of times per second that we profile
static const int kNumInterrupts = 100;

// Maximum number of stack traces
static const int kMaxStackTraces = 3000;

// Maximum number of frames to store from the stack traces sampled.
static const int kMaxFramesToCapture = 128;

// Location where the data are dumped.
static const char kDefaultOutFile[] = "traces.txt";

kNumInterrupts: 每秒钟抽取样本的次数;

kMaxStackTraces: 抽取栈的最高数量;超过此数量的栈信息将不再被记录,但重复的栈仍然会被记录;

kMaxFramesToCapture: 获取帧最大数量;意义不明,我猜测可能是栈信息层数的上限;


traces.txt中的信息如下所示:

1 12    java.util.concurrent.ArrayBlockingQueue.insert(ArrayBlockingQueue.java:153)
        java.util.concurrent.ArrayBlockingQueue.offer(ArrayBlockingQueue.java:303)
        org.apache.flume.channel.file.LogFile$RandomReader.checkIn(LogFile.java:531)
        org.apache.flume.channel.file.LogFile$RandomReader.get(LogFile.java:496)
        org.apache.flume.channel.file.Log.get(Log.java:606)
        org.apache.flume.channel.file.FileChannel$FileBackedTransaction.doTake(FileChannel.java:523)
        org.apache.flume.channel.BasicTransactionSemantics.take(BasicTransactionSemantics.java:113)
        org.apache.flume.channel.BasicChannelSemantics.take(BasicChannelSemantics.java:95)
        org.apache.flume.sink.hdfs.HDFSEventSink.process(HDFSEventSink.java:374)
        org.apache.flume.sink.DefaultSinkProcessor.process(DefaultSinkProcessor.java:68)
        org.apache.flume.SinkRunner$PollingRunner.run(SinkRunner.java:147)
        java.lang.Thread.run(Thread.java:724)

1 4     sun.net.www.protocol.jar.JarURLConnection.connect(JarURLConnection.java:120)
        sun.net.www.protocol.jar.JarURLConnection.getInputStream(JarURLConnection.java:150)
        java.net.URLClassLoader.getResourceAsStream(URLClassLoader.java:233)
        javax.xml.parsers.SecuritySupport$4.run(SecuritySupport.java:94)

可见记录的都是java程序运行过程中的堆栈调用信息。然而这样的结果可读性比较差,我们可以使用java flame graph来将其转化为可读结果。


java flame graph是个非常讨巧的设计。它本身不支持堆栈抽样,但是它能将抽样结果转化为特别容易理解的形式,及“火焰图”。先看一下效果:

里面各种红橙黄色没有什么意义,只是做区分用的。从最底下往上表示堆栈的层层调用。横向表明每个接口实际占用的CPU时间。我这个火焰图测试的是flume(不是flame graph)的测试结果。可以看出有两块比较占用CPU时间的地方,分别是对磁盘的读操作和写操作。是不是很直观啊。

flame graph支持多种抽样器,这里我们先了解一下java flame graph的使用方法,这也是一种比较简单的使用方式。

在上述lightweight java profiler中,我们提到抽样器生成的结果是一个很难看懂的traces.txt,而在使用java flame graph的时候,只要以下命令:

./stackcollapse-ljp.awk < ../traces.txt | ./flamegraph.pl > ../traces.svg

然后会生成一个traces.svg,调用浏览器打开就是上面那个图的样子了。这是个矢量图,所以可以随意扩大缩小;在全图下看不清的底层堆栈信息,放大到一定程度后都能看的清清楚楚。

© 著作权归作者所有

共有 人打赏支持
dokia
粉丝 2
博文 29
码字总数 36553
作品 0
海淀
程序员
9 个帮助你进行Java性能调优的工具

NetBeans Profiler NetBeans Profiler is found in NetBeans The NetBeans profiler is a modular add on which is used to provide the profiling functionality for the NetBeans IDE, whi......

ihaolin
2014/06/16
0
0
从分析async-profiler的实现细节来学习jvmti

作者: 一字马胡 转载标志 【2017-12-22】 更新日志 厉害的内容分享 在上一篇文章中分享了一个用于分析java应用性能的厉害角色:async-profiler,具体的内容可以参考Java应用性能分析工具:a...

疼丸李白
2017/12/22
0
0
Java应用性能分析工具:async-profiler

作者: 一字马胡 转载标志 【2017-12-15】 更新日志 厉害的内容 及时对项目进行性能检测,并且分析检测结果数据,发现热点代码是一项充满意义的工作,因为可能因为某一段热点代码会拖慢整个系...

疼丸李白
2017/12/15
0
0
常用Java性能测试工具的分析与对比

虽然市场上的 Java Profiler 工具有不少,但是基本功能大多相似,本节首先对这些基本功能进行介绍。 遥测(Telemetry):遥测是一种用来查看应用程序运行行为的最简单的方法。通常会有多个视...

lanmeimei
2014/03/18
0
0
Java调用Keras、Tensorflow模型

实现python离线训练模型,Java在线预测部署。查看原文 目前深度学习主流使用python训练自己的模型,有非常多的框架提供了能快速搭建神经网络的功能,其中Keras提供了high-level的语法,底层可...

ioiogoo
04/03
0
0

没有更多内容

加载失败,请刷新页面

加载更多

你为什么在Redis里读到了本应过期的数据

一个事故的故事 晚上睡的正香突然被电话吵醒,对面是开发焦急的声音:我们的程序在访问redis的时候读到了本应过期的key导致整个业务逻辑出了问题,需要马上解决。 看到这里你可能会想:这是不...

IT--小哥
今天
2
0
祝大家节日快乐,阖家幸福! centos GnuTLS 漏洞

yum update -y gnutls 修复了GnuTLS 漏洞。更新到最新 gnutls.x86_64 0:2.12.23-22.el6 版本

yizhichao
昨天
5
0
Scrapy 1.5.0之选择器

构造选择器 Scrapy选择器是通过文本(Text)或 TextResponse 对象构造的 Selector 类的实例。 它根据输入类型自动选择最佳的解析规则(XML vs HTML): >>> from scrapy.selector import Sele...

Eappo_Geng
昨天
4
0
Windows下Git多账号配置,同一电脑多个ssh-key的管理

Windows下Git多账号配置,同一电脑多个ssh-key的管理   这一篇文章是对上一篇文章《Git-TortoiseGit完整配置流程》的拓展,所以需要对上一篇文章有所了解,当然直接往下看也可以,其中也有...

morpheusWB
昨天
5
0
中秋快乐!!!

HiBlock
昨天
3
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部