java對hdfs的操作是怎樣的

這期內容當中小編將會給大家帶來有關java對hdfs的操作是怎樣的，文章內容豐富且以專業的角度為大家分析和敘述，閱讀完這篇文章希望大家可以有所收獲。

package hdfs;
import java.io.File;
import java.io.FileInputStream;
import java.io.FileNotFoundException;
import java.io.FileOutputStream;
import java.io.IOException;
import java.net.URI;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FSDataInputStream;
import org.apache.hadoop.fs.FSDataOutputStream;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;
/**
 * java對hdfs的操作
 * @author 林
 *
 */
public class App2 {
 public static final String HDFS_PATH = "hdfs://hadoop:9000";
 public static final String DRI_PATH = "/d1000";
 public static final String FILE_PATH = "/d1000/f1000";
 public static void main(String[] args) throws Exception {
  FileSystem fileSystem = FileSystem.get(new URI(HDFS_PATH),new Configuration());
  //創建文件夾
  mkDri(fileSystem);
  //上傳文件
  uploadDate(fileSystem);
  //下載文件
  downloadFile(fileSystem);
  //刪除文件
  deleteFile(fileSystem);
 }
 public static void deleteFile(FileSystem fileSystem) throws IOException {
  fileSystem.delete(new Path(FILE_PATH), true);
 }
 
 //下載文件
 public static void downloadFile(FileSystem fileSystem) throws IOException {
  FSDataInputStream in = fileSystem.open(new Path(FILE_PATH));
  FileOutputStream out = new FileOutputStream(new File("D:/copy.txt"));
  //IOUtils.copyBytes(in, System.out, 2048, true);下載到控制臺
  IOUtils.copyBytes(in,out, 2048, true);
 }
 
 //上傳文件
 public static void uploadDate(FileSystem fileSystem) throws IOException,
   FileNotFoundException {
  FSDataOutputStream out = fileSystem.create(new Path(FILE_PATH));
  FileInputStream in = new FileInputStream("D:/hadoop安裝.txt");
  IOUtils.copyBytes(in, out, 1024,true);
 }
 //創建目錄
 public static void mkDri(FileSystem fileSystem) throws IOException {
  fileSystem.mkdirs(new Path(DRI_PATH));
 }
}

上述就是小編為大家分享的java對hdfs的操作是怎樣的了，如果剛好有類似的疑惑，不妨參照上述分析進行理解。如果想知道更多相關知識，歡迎關注億速云行業資訊頻道。