分享

如何监控namenode的内存消耗情况呢

cuter 发表于 2018-4-22 20:24:32 [显示全部楼层] 只看大图 回帖奖励 阅读模式 关闭右栏 7 7959
开始我的Hadoop集群中什么文件都没放,后面上传了1000文件,如何查看上传前后namenode消耗的内存!然后看了一篇文章《An Improved HDFS for Small File》图片说明以及另外一篇文章《基于Hadoop的小文件存储优化方案都不知道他们怎么去获得的数据图片说明》,不明白他们是怎么得到namenode的内存消耗的,求有懂这方面的大师教教我,必有重谢!

已有(7)人评论

跳转到指定楼层
langke93 发表于 2018-4-22 21:33:50
namenode怎么消耗的,Linux本身带有监控的,就一个节点是非常容易实现的。
回复

使用道具 举报

cuter 发表于 2018-4-22 21:48:52
langke93 发表于 2018-4-22 21:33
namenode怎么消耗的,Linux本身带有监控的,就一个节点是非常容易实现的。

您好!能详细说一下过程吗?

回复

使用道具 举报

cuter 发表于 2018-4-22 21:51:28
cuter 发表于 2018-4-22 21:48
您好!能详细说一下过程吗?

这是别人的数据,但我不知道怎么弄

namenode的内存消耗

namenode的内存消耗

namenode的内存消耗

namenode的内存消耗
回复

使用道具 举报

langke93 发表于 2018-4-22 21:56:45
cuter 发表于 2018-4-22 21:51
这是别人的数据,但我不知道怎么弄

这个没有什么不好弄得。有了数据,找个画图工具,就可以实现了。
回复

使用道具 举报

cuter 发表于 2018-4-22 22:01:17
langke93 发表于 2018-4-22 21:56
这个没有什么不好弄得。有了数据,找个画图工具,就可以实现了。

您好,上面的是别人的数据,关键是我不会监控这个数据
回复

使用道具 举报

desehawk 发表于 2018-4-23 19:25:50
cuter 发表于 2018-4-22 22:01
您好,上面的是别人的数据,关键是我不会监控这个数据

Linux有自带的监控工具,想监控网络,内存,io等都有工具的。
回复

使用道具 举报

halloki_pinjN 发表于 2018-5-28 13:03:25
你好,你找到方法了吗?我现在也在找,看了很多篇论文,也没有一篇能写清楚的
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条