以下是在Debian上配置Hadoop数据存储的步骤:
sudo apt update,sudo apt install openjdk-8-jdk安装OpenJDK 8。wget https://downloads.apache.org/hadoop/common/hadoop-3.3.6/hadoop-3.3.6.tar.gz,然后解压到指定目录,如/usr/local/hadoop。~/.bashrc文件中添加export HADOOP_HOME=/usr/local/hadoop和export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin,并使用source ~/.bashrc使更改生效。fs.defaultFS为hdfs://namenode:9000,还可设置hadoop.tmp.dir等。dfs.replication(副本数,默认3)、dfs.namenode.name.dir(NameNode数据存储目录)、dfs.datanode.data.dir(DataNode数据存储目录)等。yarn.nodemanager.aux - services为mapreduce_shuffle等。hdfs namenode -format命令。start - dfs.sh,在ResourceManager上运行start - yarn.sh。此外,还可根据需求配置数据存储策略,如设置不同的存储类型、启用数据压缩等。