欧美一级特黄大片做受成人-亚洲成人一区二区电影-激情熟女一区二区三区-日韩专区欧美专区国产专区

HDFS中JAVAAPI的使用

HDFS是一個(gè)分布式文件系統(tǒng),既然是文件系統(tǒng),就可以對(duì)其文件進(jìn)行操作,比如說新建文件、刪除文件、讀取文件內(nèi)容等操作。下面記錄一下使用JAVA API對(duì)HDFS中的文件進(jìn)行操作的過程。

專注于為中小企業(yè)提供做網(wǎng)站、網(wǎng)站制作服務(wù),電腦端+手機(jī)端+微信端的三站合一,更高效的管理,為中小企業(yè)鼓樓免費(fèi)做網(wǎng)站提供優(yōu)質(zhì)的服務(wù)。我們立足成都,凝聚了一批互聯(lián)網(wǎng)行業(yè)人才,有力地推動(dòng)了成百上千家企業(yè)的穩(wěn)健成長,幫助中小企業(yè)通過網(wǎng)站建設(shè)實(shí)現(xiàn)規(guī)模擴(kuò)充和轉(zhuǎn)變。

對(duì)分HDFS中的文件操作主要涉及一下幾個(gè)類:

Configuration類:該類的對(duì)象封轉(zhuǎn)了客戶端或者服務(wù)器的配置。

FileSystem類:該類的對(duì)象是一個(gè)文件系統(tǒng)對(duì)象,可以用該對(duì)象的一些方法來對(duì)文件進(jìn)行操作。FileSystem fs = FileSystem.get(conf);通過FileSystem的靜態(tài)方法get獲得該對(duì)象。

FSDataInputStream和FSDataOutputStream:這兩個(gè)類是HDFS中的輸入輸出流。分別通過FileSystem的open方法和create方法獲得。

具體如何對(duì)文件操作清下下面例子:

package com.hdfs;

import java.io.FileInputStream;
import java.io.IOException;
import java.io.InputStream;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FSDataOutputStream;
import org.apache.hadoop.fs.FileStatus;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;

public class HdfsTest {
  
  //創(chuàng)建新文件
  public static void createFile(String dst , byte[] contents) throws IOException{
    Configuration conf = new Configuration();
    FileSystem fs = FileSystem.get(conf);
    Path dstPath = new Path(dst); //目標(biāo)路徑
    //打開一個(gè)輸出流
    FSDataOutputStream outputStream = fs.create(dstPath);
    outputStream.write(contents);
    outputStream.close();
    fs.close();
    System.out.println("文件創(chuàng)建成功!");
  }
  
  //上傳本地文件
  public static void uploadFile(String src,String dst) throws IOException{
    Configuration conf = new Configuration();
    FileSystem fs = FileSystem.get(conf);
    Path srcPath = new Path(src); //原路徑
    Path dstPath = new Path(dst); //目標(biāo)路徑
    //調(diào)用文件系統(tǒng)的文件復(fù)制函數(shù),前面參數(shù)是指是否刪除原文件,true為刪除,默認(rèn)為false
    fs.copyFromLocalFile(false,srcPath, dstPath);
    
    //打印文件路徑
    System.out.println("Upload to "+conf.get("fs.default.name"));
    System.out.println("------------list files------------"+"\n");
    FileStatus [] fileStatus = fs.listStatus(dstPath);
    for (FileStatus file : fileStatus) 
    {
      System.out.println(file.getPath());
    }
    fs.close();
  }
  
  //文件重命名
  public static void rename(String oldName,String newName) throws IOException{
    Configuration conf = new Configuration();
    FileSystem fs = FileSystem.get(conf);
    Path oldPath = new Path(oldName);
    Path newPath = new Path(newName);
    boolean isok = fs.rename(oldPath, newPath);
    if(isok){
      System.out.println("rename ok!");
    }else{
      System.out.println("rename failure");
    }
    fs.close();
  }
  //刪除文件
  public static void delete(String filePath) throws IOException{
    Configuration conf = new Configuration();
    FileSystem fs = FileSystem.get(conf);
    Path path = new Path(filePath);
    boolean isok = fs.deleteOnExit(path);
    if(isok){
      System.out.println("delete ok!");
    }else{
      System.out.println("delete failure");
    }
    fs.close();
  }
  
  //創(chuàng)建目錄
  public static void mkdir(String path) throws IOException{
    Configuration conf = new Configuration();
    FileSystem fs = FileSystem.get(conf);
    Path srcPath = new Path(path);
    boolean isok = fs.mkdirs(srcPath);
    if(isok){
      System.out.println("create dir ok!");
    }else{
      System.out.println("create dir failure");
    }
    fs.close();
  }
  
  //讀取文件的內(nèi)容
  public static void readFile(String filePath) throws IOException{
    Configuration conf = new Configuration();
    FileSystem fs = FileSystem.get(conf);
    Path srcPath = new Path(filePath);
    InputStream in = null;
    try {
      in = fs.open(srcPath);
      IOUtils.copyBytes(in, System.out, 4096, false); //復(fù)制到標(biāo)準(zhǔn)輸出流
    } finally {
      IOUtils.closeStream(in);
    }
  }
  
  
  public static void main(String[] args) throws IOException {
    //測(cè)試上傳文件
    //uploadFile("D:\\c.txt", "/user/hadoop/test/");
    //測(cè)試創(chuàng)建文件
    /*byte[] contents = "hello world 世界你好\n".getBytes();
    createFile("/user/hadoop/test1/d.txt",contents);*/
    //測(cè)試重命名
    //rename("/user/hadoop/test/d.txt", "/user/hadoop/test/dd.txt");
    //測(cè)試刪除文件
    //delete("test/dd.txt"); //使用相對(duì)路徑
    //delete("test1");  //刪除目錄
    //測(cè)試新建目錄
    //mkdir("test1");
    //測(cè)試讀取文件
    readFile("test1/d.txt");
  }

}

以上就是本文的全部內(nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持創(chuàng)新互聯(lián)。

文章名稱:HDFS中JAVAAPI的使用
當(dāng)前鏈接:http://aaarwkj.com/article12/jjgsdc.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供面包屑導(dǎo)航、定制開發(fā)、標(biāo)簽優(yōu)化、定制網(wǎng)站、域名注冊(cè)、外貿(mào)建站

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)

成都做網(wǎng)站
亚洲av日韩av高潮| 亚洲国产日韩欧美一级| 午夜免费成人在线视频| 中文字幕亚洲精品视频| 亚洲成在人天堂一区二区| 久久成人影院免费观看| av免费在线不卡一区| 大片天天看菲色亚洲黄色| 中文字幕有码av海量| 欧美一区二区久久综合| 开裆丝袜高跟啪啪高潮av| 热久久这里只有精品网址| 日本一区二区三区中文字幕不卡| 欧美亚洲午夜精品久久久| 性色av人妻中文一区二区| 丁香六月婷婷激情啪啪综合| 精品偷拍污视频一区二区| 麻豆精品国产粉嫩av| 极品人妻少妇精品一区二区| 超碰国产熟女一区二区三区| 国语对白刺激真实精品| 日韩精品在线观看天堂| 午夜免费视频观看在线| 尤物在线免费观看视频| 丰满人妻大屁一区二区| 蜜臀99久久精品久久久| 欧美精品三级不卡在线| 婷婷五激情五月激情片| 亚洲av日韩综合一区尤物| 国产91对白在线观看| 一区二区三区蜜桃av| 欧美一区二区三区久久妇| 在线观看永久免费黄色| 日韩中文不卡人成在线视频| 亚洲天堂av一区二区在线| 国产一级二级三级久久| 欧美日韩国产激情高清| 久久视热频这里只有精品| 日本一区中文字幕欧美| 日本欧美自拍偷拍高清| 国产日本福利在线综合网|