温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

怎么合理设置Navigator Metadata Server的Heap

发布时间:2021-12-13 10:26:20 来源:亿速云 阅读:132 作者:小新 栏目:大数据

这篇文章主要介绍怎么合理设置Navigator Metadata Server的Heap,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

1.文档编写目的


在Cloudera Manager管理中部署了Navigator服务后,随着集群数据量的增加Navigator Metadata处理的元数据量会相应的增加,这时会遇到Navigator Metadata服务反复崩溃或启动失败。

2.Navigator Metadata Heap推算


推算Navigator Metadata服务的Heap大小,主要依赖该服务的log,在log中检索关键的日志信息计算Heap的大小。

1.当Navigator Metadata Server启动时,会记录其内部Solr索引中包含的文档数,登录Navigator Metadata Server服务所在服务器,进入其日志目录检索日志文件

怎么合理设置Navigator Metadata Server的Heap

2.在日志文件中检索如下信息nav_elements和nav_elements,如下脚本为获取到最新的文档数

grep 'nav_elements' mgmt-cmf-mgmt-NAVIGATORMETASERVER-cdh02.fayson.com.log.out |awk ' ''{print $1" "$7" "$12}'|sort -r|grep -m 10 'nav_elements'

(可左右滑动)

怎么合理设置Navigator Metadata Server的Heap

grep 'nav_relations' mgmt-cmf-mgmt-NAVIGATORMETASERVER-cdh02.fayson.com.log.out |awk ' ''{print $1" "$7" "$12}'|sort -r|grep -m 10 'nav_relations'

(可左右滑动)

怎么合理设置Navigator Metadata Server的Heap

3.在上一步获取到nav_elements和nav_elements的文档数(选择最大的一条数据),根据如下计算公式推算出合理的Heap大小,计算公式如下:

((nav_elements+nav_elements)* 200 bytes) + 2GB

通过该公式推算出Navigator Metadata Server的Heap大小约为:

(12633+12652) * 200 + 2 * 1024 * 1024 = 7154152 bytes 约为6~7GB

4.登录CM修改Navigator Metadata Server的Java Heap大小

怎么合理设置Navigator Metadata Server的Heap

保存配置并重启Navigator Metadata Server服务。

以上是“怎么合理设置Navigator Metadata Server的Heap”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注亿速云行业资讯频道!

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI