温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

HADOOP/HBASE/SPARK修改PID文件位置

发布时间:2020-06-21 12:45:50 来源:网络 阅读:1229 作者:谁伴我闯荡 栏目:关系型数据库

当不修改HADOOP/HBASE/SPARK的PID文件位置时,系统默认会把PID文件生成到/tmp目录下,但是/tmp目录在一段时间后会被删除,所以以后当我们停止HADOOP/HBASE/SPARK时,会发现无法停止相应的进程,因为PID文件已经被删除,所以现在我们需要修改HADOOP/HBASE/SPARK的PID文件地址.修改方法如下:


我们需要把HADOOP/HBASE/SPARK的PID文件生成到/var/hadoop/pids目录中.


  1. 在集群的各节点上新建/var/hadoop/pids目录 命令 : sudo mkdir -p /var/hadoop/pids 

  2. 需要修改各节点上/var/hadoop/pids目录的权限,我使用的是hadoop用户启动HADOOP/HBASE/SPARK集群,所以需要把/var/hadoop/pids的目录权限修改为hadoop,否则在启动HADOOP/HBASE/SPARK集群时无法写入到该目录中. 修改权限命令 : chown -R hadoop:hadoop /var/hadoop

  3. 修改hadoop-env.sh 增加:export HADOOP_PID_DIR=/var/hadoop/pids

  4. 修改yarn-env.sh 增加:export YARN_PID_DIR=/var/hadoop/pids

  5. 修改hbase-env.sh ,增加:export HBASE_PID_DIR=/var/hadoop/pids

  6. 修改spark-env.sh, 增加 : export SPARK_PID_DIR=/var/hadoop/pids

  7. 把配置文件发送到集群中的各个节点上,重新启动集群, 查看/var/hadoop/pids目录会发现PID文件在该目录生成

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI