文档章节

lightweight java profiler与java flame graph初了解

dokia
 dokia
发布于 2015/12/29 10:20
字数 825
阅读 173
收藏 1

了解java程序中CPU占用情况对于java程序开发,尤其是后台服务开发来说是一件必要且重要的事情。在分析高并发下服务性能压力时,需要了解程序中长时间占用CPU的程序块。这需要我们使用分析器(profiler)在java进程运行的过程中定时抽样分析。

lightweight java profiler是一种针对java的轻量级分析器,使用步骤简单,共分为两步:

  1. 获得源码,make all,在build-32/build-64目录下生存liblagent.so库文件

  2. 执行java程序,并将此库文件作为-agentpath加入java虚拟机选项中去

运行一段时间后退出java程序,java程序根目录下会生成跟踪文件traces.txt,里面记录了定时抽样获得的java堆栈信息。

分析器默认参数:

// Number of times per second that we profile
static const int kNumInterrupts = 100;

// Maximum number of stack traces
static const int kMaxStackTraces = 3000;

// Maximum number of frames to store from the stack traces sampled.
static const int kMaxFramesToCapture = 128;

// Location where the data are dumped.
static const char kDefaultOutFile[] = "traces.txt";

kNumInterrupts: 每秒钟抽取样本的次数;

kMaxStackTraces: 抽取栈的最高数量;超过此数量的栈信息将不再被记录,但重复的栈仍然会被记录;

kMaxFramesToCapture: 获取帧最大数量;意义不明,我猜测可能是栈信息层数的上限;


traces.txt中的信息如下所示:

1 12    java.util.concurrent.ArrayBlockingQueue.insert(ArrayBlockingQueue.java:153)
        java.util.concurrent.ArrayBlockingQueue.offer(ArrayBlockingQueue.java:303)
        org.apache.flume.channel.file.LogFile$RandomReader.checkIn(LogFile.java:531)
        org.apache.flume.channel.file.LogFile$RandomReader.get(LogFile.java:496)
        org.apache.flume.channel.file.Log.get(Log.java:606)
        org.apache.flume.channel.file.FileChannel$FileBackedTransaction.doTake(FileChannel.java:523)
        org.apache.flume.channel.BasicTransactionSemantics.take(BasicTransactionSemantics.java:113)
        org.apache.flume.channel.BasicChannelSemantics.take(BasicChannelSemantics.java:95)
        org.apache.flume.sink.hdfs.HDFSEventSink.process(HDFSEventSink.java:374)
        org.apache.flume.sink.DefaultSinkProcessor.process(DefaultSinkProcessor.java:68)
        org.apache.flume.SinkRunner$PollingRunner.run(SinkRunner.java:147)
        java.lang.Thread.run(Thread.java:724)

1 4     sun.net.www.protocol.jar.JarURLConnection.connect(JarURLConnection.java:120)
        sun.net.www.protocol.jar.JarURLConnection.getInputStream(JarURLConnection.java:150)
        java.net.URLClassLoader.getResourceAsStream(URLClassLoader.java:233)
        javax.xml.parsers.SecuritySupport$4.run(SecuritySupport.java:94)

可见记录的都是java程序运行过程中的堆栈调用信息。然而这样的结果可读性比较差,我们可以使用java flame graph来将其转化为可读结果。


java flame graph是个非常讨巧的设计。它本身不支持堆栈抽样,但是它能将抽样结果转化为特别容易理解的形式,及“火焰图”。先看一下效果:

里面各种红橙黄色没有什么意义,只是做区分用的。从最底下往上表示堆栈的层层调用。横向表明每个接口实际占用的CPU时间。我这个火焰图测试的是flume(不是flame graph)的测试结果。可以看出有两块比较占用CPU时间的地方,分别是对磁盘的读操作和写操作。是不是很直观啊。

flame graph支持多种抽样器,这里我们先了解一下java flame graph的使用方法,这也是一种比较简单的使用方式。

在上述lightweight java profiler中,我们提到抽样器生成的结果是一个很难看懂的traces.txt,而在使用java flame graph的时候,只要以下命令:

./stackcollapse-ljp.awk < ../traces.txt | ./flamegraph.pl > ../traces.svg

然后会生成一个traces.svg,调用浏览器打开就是上面那个图的样子了。这是个矢量图,所以可以随意扩大缩小;在全图下看不清的底层堆栈信息,放大到一定程度后都能看的清清楚楚。

© 著作权归作者所有

共有 人打赏支持
dokia
粉丝 3
博文 30
码字总数 37393
作品 0
海淀
程序员
私信 提问
9 个帮助你进行Java性能调优的工具

NetBeans Profiler NetBeans Profiler is found in NetBeans The NetBeans profiler is a modular add on which is used to provide the profiling functionality for the NetBeans IDE, whi......

ihaolin
2014/06/16
0
0
从分析async-profiler的实现细节来学习jvmti

作者: 一字马胡 转载标志 【2017-12-22】 更新日志 厉害的内容分享 在上一篇文章中分享了一个用于分析java应用性能的厉害角色:async-profiler,具体的内容可以参考Java应用性能分析工具:a...

疼丸李白
2017/12/22
0
0
Java应用性能分析工具:async-profiler

作者: 一字马胡 转载标志 【2017-12-15】 更新日志 厉害的内容 及时对项目进行性能检测,并且分析检测结果数据,发现热点代码是一项充满意义的工作,因为可能因为某一段热点代码会拖慢整个系...

疼丸李白
2017/12/15
0
0
常用Java性能测试工具的分析与对比

虽然市场上的 Java Profiler 工具有不少,但是基本功能大多相似,本节首先对这些基本功能进行介绍。 遥测(Telemetry):遥测是一种用来查看应用程序运行行为的最简单的方法。通常会有多个视...

lanmeimei
2014/03/18
0
0
Java调用Keras、Tensorflow模型

实现python离线训练模型,Java在线预测部署。查看原文 目前深度学习主流使用python训练自己的模型,有非常多的框架提供了能快速搭建神经网络的功能,其中Keras提供了high-level的语法,底层可...

ioiogoo
04/03
0
0

没有更多内容

加载失败,请刷新页面

加载更多

强化学习在美团“猜你喜欢”的实践

1 概述 “猜你喜欢”是美团流量最大的推荐展位,位于首页最下方,产品形态为信息流,承担了帮助用户完成意图转化、发现兴趣、并向美团点评各个业务方导流的责任。经过多年迭代,目前“猜你喜...

美团技术团队
11分钟前
0
0
docker - 常用命令

1. docker服务的启动、停止、重启 [root@localhost ~]# service docker restartRedirecting to /bin/systemctl restart docker.service[root@localhost ~]# service docker stopRedir......

细肉云吞
14分钟前
1
0
安装CentOS 6.5 系统

一、安装CentOS 6.5 系统 1、选择第一个 "Install or upgrade an existing system" 2、选择跳过 “Skip” 3、直接下一步 4、建议初学者选择中文的,工作中选择 “English” 5、键盘选择 “美...

寰宇01
26分钟前
0
0
AR+ 实时音视频通话,虚拟与现实无缝结合

今年中旬 Google 在万众期待下推出了 ARCore,能将现实与数码完美无缝地融合在一起,丰富我们的现实世界。通过它开发者可以更加快速方便地在 Android 平台开发 AR 应用,凭借 AR 技术大量产品...

七牛云
26分钟前
0
0
手把手教你实现一个 Vue 进度条组件!

最近在个人的项目中,想对页面之间跳转的过程进行优化,想到了很多文档或 npm 等都用到的页面跳转进度条,于是便想自己去实现一个,特此记录。 来看下 npm 搜索组件时候的效果: so 下面咱们...

我的卡
27分钟前
0
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部