温馨提示×

HDFS文件系统Ubuntu上怎么用

小樊
55
2025-08-09 20:52:59
栏目: 智能运维

在Ubuntu上使用HDFS文件系统,首先要安装配置Hadoop,然后使用HDFS命令进行操作。以下是具体步骤:

安装配置Hadoop

  1. 安装Java:Hadoop依赖Java,使用命令sudo apt updatesudo apt install openjdk-8-jdk安装JDK,安装后通过java -version验证。
  2. 下载安装Hadoop:从Apache Hadoop官网下载,解压到指定目录,如/usr/local/hadoop
  3. 配置环境变量:编辑~/.bashrc文件,添加export HADOOP_HOME=/usr/local/hadoopexport PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin,然后执行source ~/.bashrc使配置生效。
  4. 配置HDFS:进入/usr/local/hadoop/etc/hadoop目录,编辑core-site.xml,设置fs.defaultFShdfs://localhost:9000;编辑hdfs-site.xml,设置dfs.replication等参数。
  5. 格式化NameNode:在终端执行hdfs namenode -format
  6. 启动HDFS:执行start-dfs.sh启动HDFS服务。

使用HDFS命令操作文件

  • 创建目录hdfs dfs -mkdir /path/to/directory
  • 上传文件hdfs dfs -put local_file_path /hdfs/destination_path
  • 下载文件hdfs dfs -get /hdfs/source_path local_file_path
  • 查看目录内容hdfs dfs -ls /path/to/directory
  • 删除文件或目录hdfs dfs -rm /path/to/filehdfs dfs -rm -r /path/to/directory

0