码迷,mamicode.com
首页 > 其他好文 > 详细

怎样去找出线上hive或mapreduce运行慢的原因

时间:2014-08-19 19:14:35      阅读:291      评论:0      收藏:0      [点我收藏+]

标签:hadoop   hive   mapreduce   

hive mapreduce 都会转成java。所以要用的java分析工具。当看到map或reduce 阶段运行缓慢,我们去线上找到mapreduce的进程:
1. top 发现进程:
bubuko.com,布布扣
2. top -Hp 32486 找到进程中cpu或mem磁盘消耗最高的线程:
bubuko.com,布布扣
3.  用jstack主要用来查看某个Java进程内的线程堆栈信息:
bin/jstack -F 26510
bubuko.com,布布扣
4. 可以用jmap查看堆内存使用,也可以dump出来
jmap -dump:format=b,file=46710.dump 46710 然后可以用jvasulvm 查看

参考:

怎样去找出线上hive或mapreduce运行慢的原因,布布扣,bubuko.com

怎样去找出线上hive或mapreduce运行慢的原因

标签:hadoop   hive   mapreduce   

原文地址:http://blog.csdn.net/kntao/article/details/38683671

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!