怎樣修改Ubuntu HDFS配置

修改Ubuntu HDFS配置主要是編輯相關配置文件，以下是具體步驟和常用配置項：

1. 安裝Java和Hadoop：先安裝JDK，再從官網下載Hadoop并解壓到指定目錄，如/usr/local/。
2. 配置環境變量：編輯~/.bashrc或/etc/profile，添加HADOOP_HOME和PATH，如export HADOOP_HOME=/usr/local/hadoop，export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin，然后執行source命令使配置生效。
3. 修改核心配置文件：
   • core-site.xml：配置默認文件系統，如<property><name>fs.defaultFS</name><value>hdfs://localhost:9000</value></property>。
   • hdfs-site.xml：可設置副本數dfs.replication、NameNode和DataNode存儲目錄dfs.namenode.name.dir與dfs.datanode.data.dir、塊大小dfs.blocksize等，例如<property><name>dfs.replication</name><value>3</value></property>。
   • mapred-site.xml：配置MapReduce運行框架等，如<property><name>mapreduce.framework.name</name><value>yarn</value></property>。
   • yarn-site.xml：配置YARN資源管理相關參數，如<property><name>yarn.resourcemanager.address</name><value>resourcemanager:8032</value></property>。
4. 格式化NameNode：在首次啟動前，執行hdfs namenode -format。
5. 啟動HDFS集群：使用start-dfs.sh和start-yarn.sh命令啟動服務。

修改配置后，可通過hdfs dfsadmin -report查看集群狀態，訪問http://localhost:50070（NameNode Web界面）驗證配置是否正確。