在Ubuntu上管理HDFS文件系統,首先要安裝配置Hadoop環境,然后使用Shell命令或Java API進行操作。具體如下:
sudo apt update && sudo apt upgrade -y
,sudo apt install -y build-essential openssh-server
。JAVA_HOME
環境變量。core-site.xml
、hdfs-site.xml
等。hdfs namenode -format
,啟動HDFS服務:start-dfs.sh
。hdfs dfs -mkdir
創建目錄,hdfs dfs -ls
查看目錄,hdfs dfs -put
上傳文件,hdfs dfs -get
下載文件,hdfs dfs -rm
刪除文件或目錄。hdfs dfsadmin -report
查看集群狀態。FileSystem
對象,通過調用其方法實現文件操作,如fs.mkdirs()
創建目錄等。