本篇內(nèi)容介紹了“hadoop機(jī)制有哪些”的有關(guān)知識(shí)，在實(shí)際案例的操作過(guò)程中，不少人都會(huì)遇到這樣的困境，接下來(lái)就讓小編帶領(lǐng)大家學(xué)習(xí)一下如何處理這些情況吧！希望大家仔細(xì)閱讀，能夠?qū)W有所成！

10年積累的成都網(wǎng)站設(shè)計(jì)、成都網(wǎng)站建設(shè)經(jīng)驗(yàn)，可以快速應(yīng)對(duì)客戶(hù)對(duì)網(wǎng)站的新想法和需求。提供各種問(wèn)題對(duì)應(yīng)的解決方案。讓選擇我們的客戶(hù)得到更好、更有力的網(wǎng)絡(luò)服務(wù)。我雖然不認(rèn)識(shí)你，你也不認(rèn)識(shí)我。但先網(wǎng)站設(shè)計(jì)后付款的網(wǎng)站建設(shè)流程，更有東鄉(xiāng)族免費(fèi)網(wǎng)站建設(shè)讓你可以放心的選擇與我們合作。

1.簡(jiǎn)述 checkpoint機(jī)制

這里主要是用到了SN的作用，通過(guò)SN復(fù)制了原NN中的日志文件和SN中原有的鏡像文件相結(jié)合，通過(guò)這樣的原理，SN等同于是NN的一個(gè)副本，當(dāng)NN服務(wù)器遇到故障重啟時(shí)，可以通過(guò)SN來(lái)恢復(fù)數(shù)據(jù)。

2.如何單獨(dú)重啟 Namenode

  dfs-sh.start

3.簡(jiǎn)述HDFS讀數(shù)據(jù)原理 

客戶(hù)端將請(qǐng)求發(fā)給NN,然后NN同意讀數(shù)據(jù)，然后NN通過(guò)客戶(hù)端的請(qǐng)求信息從它里面的元數(shù)據(jù)去找數(shù)據(jù)的位置（存儲(chǔ)要讀取的數(shù)據(jù)的block塊在那三個(gè)DN里），然后把這些信息返回給客戶(hù)端，客戶(hù)端再通過(guò)這些信息去DN中拿數(shù)據(jù)。

4.如何啟動(dòng)zookeeper集群，如何確定zookeeper集群?jiǎn)?dòng)成功，如何停止zookeeper集群

ZkCli.sh,zkCli.sh status,zkCli.sh stop

5.簡(jiǎn)述HDFS的HA高可用集群原理 

最少需要兩臺(tái)NN服務(wù)器，當(dāng)其中一臺(tái)NN服務(wù)器遇到故障，hadoop由于自帶了一個(gè)False檢測(cè)文件，它會(huì)間隔一小段時(shí)間就會(huì)向另一臺(tái)服務(wù)器發(fā)送心跳告訴另一臺(tái)服務(wù)器，它監(jiān)管的這臺(tái)在用的服務(wù)器有沒(méi)有問(wèn)題，監(jiān)測(cè)正在運(yùn)行服務(wù)器是不是壞掉了，當(dāng)它檢測(cè)到服務(wù)器壞掉之后，它會(huì)告訴它連接的另一臺(tái)在standby的服務(wù)器，然后standby的服務(wù)器就會(huì)啟動(dòng)。

關(guān)于standby的服務(wù)器如何和正在運(yùn)行的服務(wù)器的數(shù)據(jù)保持一致:

兩臺(tái)服務(wù)器之間有一個(gè)數(shù)據(jù)文件監(jiān)管系統(tǒng)，由zookeeper集群管理它，通過(guò)zookeeper保證它的數(shù)據(jù)一致性并且對(duì)它進(jìn)行上下文調(diào)度管理，它用來(lái)保存runing服務(wù)器的變化的日志文件，然后發(fā)送到standby服務(wù)器上，standby服務(wù)器會(huì)根據(jù)這些日志文件以及本身的元數(shù)據(jù)形成一個(gè)與running服務(wù)器保持一致的服務(wù)器。

關(guān)于腦裂：有時(shí)候可能因?yàn)榫W(wǎng)絡(luò)原因，false檢查工具還是發(fā)送了需求讓standby啟動(dòng)，這樣就同時(shí)存在了兩臺(tái)NN服務(wù)器，這時(shí)候數(shù)據(jù)就會(huì)混亂。

腦裂的處理辦法:1. kill -9  2.使用shell腳本

“hadoop機(jī)制有哪些”的內(nèi)容就介紹到這里了，感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識(shí)可以關(guān)注創(chuàng)新互聯(lián)-成都網(wǎng)站建設(shè)公司網(wǎng)站，小編將為大家輸出更多高質(zhì)量的實(shí)用文章！

本文名稱(chēng)：hadoop機(jī)制有哪些-創(chuàng)新互聯(lián)
標(biāo)題URL：http://aaarwkj.com/article4/dgohoe.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供微信公眾號(hào)、全網(wǎng)營(yíng)銷(xiāo)推廣、商城網(wǎng)站、服務(wù)器托管、外貿(mào)建站、ChatGPT

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶(hù)投稿、用戶(hù)轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)