温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

搭建hadoop伪分布

发布时间:2020-07-24 17:09:54 来源:网络 阅读:585 作者:1121827 栏目:大数据

hadoop下载地址

wget http://hadoop.f.dajiangtai.com/hadoop2.2/hadoop-2.2.0-x64.tar.gz

0、创建用户 useradd –m  hadoop

1、 下载hadoop 并解压

2、为 hadoop 文件分配角色

      chown -R hadoop:hadoop hadoop

                 组名:角色名 文件名

3、ls -l 查看详细信息  角色分配是否成功

4、创建hadoop 需要的文件目录

     mkdir -p /data/dfs/name

     mkdir -p /data/dfs/data

     mkdir -p /data/tmp

5、 分配角色 权限给自己的用户目录,如hadoop用户

     chown -R hadoop:hadoop hadoop/data

6、 ls -l 查看是否分配成功

7、修改hadoop 配置文件

       a、 core-site.xml

       b、hdfs-site.xml

       c、mapred-site.xml

8、配置hadoop 环境变量

9、格式化hadoop    bin/hadoop namenode -format

10 、启动hadoop     sbin/start-all.sh

11、jps  查看进程是否启动

12、hdfs 创建目录

        bin/hadoop  fs -mkdir /dajiangtai

13、hdfs 的dajiangtai目录添加文件

        hadoop fs -put /usr/java/hadoop/djt.txt /dajiangtai            


向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI