小編給大家分享一下Hadoop體系結構是怎么樣的，相信大部分人都還不怎么了解，因此分享這篇文章給大家參考一下，希望大家閱讀完這篇文章后大有收獲，下面讓我們一起去了解一下吧！

創(chuàng)新互聯(lián)建站服務項目包括萬山網(wǎng)站建設、萬山網(wǎng)站制作、萬山網(wǎng)頁制作以及萬山網(wǎng)絡營銷策劃等。多年來，我們專注于互聯(lián)網(wǎng)行業(yè)，利用自身積累的技術優(yōu)勢、行業(yè)經(jīng)驗、深度合作伙伴關系等，向廣大中小型企業(yè)、政府機構等提供互聯(lián)網(wǎng)行業(yè)的解決方案，萬山網(wǎng)站推廣取得了明顯的社會效益與經(jīng)濟效益。目前，我們服務的客戶以成都為中心已經(jīng)輻射到萬山省份的部分城市，未來相信會繼續(xù)擴大服務區(qū)域并繼續(xù)獲得客戶的支持與信任！

一.   Namenode

    1. 介紹

1)   是整個文件系統(tǒng)的管理節(jié)點

2)   它維護著整個文件系統(tǒng)的文件目錄樹，文件/目錄的元信息和每個文件對應的數(shù)據(jù)塊列表

3)   接收用戶的操作請求

4)   文件/目錄的元信息是指文件的名稱、大小、修改時間等等信息

    2. hdfs文件查看

1)   查看路徑：hdfs-site.xml的dfs.replication屬性hadoop.tmp.dir

<configuration>
       <property>
              <name>hadoop.tmp.dir</name>
              <value>/usr/local/hadoop/tmp</value>
       </property>
</configuration>

查看文件

[root@chaoren hadoop]# cd /usr/local/hadoop/tmp/dfs/name/current
[root@chaoren current]# ls
edits  fsimage  fstime  VERSION

2)   fsimage:元數(shù)據(jù)鏡像文件。存儲某一時段NameNode內存元數(shù)據(jù)信息

3)   edits:操作日志文件

4)   fstime:保存最近一次checkpoint的時間

二.   Datanode

        1. 提供真實文件數(shù)據(jù)的存儲服務。

        2. 文件塊（block）：最基本的存儲單位。對于文件內容而言，一個文件的長度大小是size，那么從文件的０偏移開始，按照固定的大小，順序對文件進行劃分并編號，劃分好的每一個塊稱一個Block。HDFS默認Block大小是64MB，以一個256MB文件，共有256/64=4個Block.

        3. 不同于普通文件系統(tǒng)的是，HDFS中，如果一個文件小于一個數(shù)據(jù)塊的大小，并不占用整個數(shù)據(jù)塊存儲空間

                4. Replication。多復本。默認是三個。查看hdfs-site.xml的dfs.replication屬性

三.   SecondaryNameNode

    1.       HA的一個解決方案。但不支持熱備。配置即可。

    2.       執(zhí)行過程：從NameNode上下載元數(shù)據(jù)信息（fsimage,edits），然后把二者合并，生成新的fsimage，在本地保存，并將其推送到NameNode，同時重置NameNode的edits.

    3.         默認在安裝在NameNode節(jié)點上，但這樣...不安全

    4.         其他

以上是“Hadoop體系結構是怎么樣的”這篇文章的所有內容，感謝各位的閱讀！相信大家都有了一定的了解，希望分享的內容對大家有所幫助，如果還想學習更多知識，歡迎關注創(chuàng)新互聯(lián)行業(yè)資訊頻道！

分享標題：Hadoop體系結構是怎么樣的
分享路徑：http://aaarwkj.com/article22/pegpjc.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供企業(yè)網(wǎng)站制作、做網(wǎng)站、網(wǎng)站維護、網(wǎng)站營銷、響應式網(wǎng)站、Google

廣告

聲明：本網(wǎng)站發(fā)布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經(jīng)允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯(lián)