本篇內(nèi)容介紹了“Hadoop技術(shù)優(yōu)缺點(diǎn)有哪些”的有關(guān)知識(shí),在實(shí)際案例的操作過(guò)程中,不少人都會(huì)遇到這樣的困境,接下來(lái)就讓小編帶領(lǐng)大家學(xué)習(xí)一下如何處理這些情況吧!希望大家仔細(xì)閱讀,能夠?qū)W有所成!
Hadoop技術(shù)優(yōu)點(diǎn)
(1)Hadoop具有按位存儲(chǔ)和處理數(shù)據(jù)能力的高可靠性。
(2)Hadoop通過(guò)可用的計(jì)算機(jī)集群分配數(shù)據(jù),完成存儲(chǔ)和計(jì)算任務(wù),這些集群可以方便地?cái)U(kuò)展到數(shù)以千計(jì)的節(jié)點(diǎn)中,具有高擴(kuò)展性。
(3)Hadoop能夠在節(jié)點(diǎn)之間進(jìn)行動(dòng)態(tài)地移動(dòng)數(shù)據(jù),并保證各個(gè)節(jié)點(diǎn)的動(dòng)態(tài)平衡,處理速度非???,具有高效性。
(4)Hadoop能夠自動(dòng)保存數(shù)據(jù)的多個(gè)副本,并且能夠自動(dòng)將失敗的任務(wù)重新分配,具有高容錯(cuò)性。
Hadoop的缺點(diǎn)
(1)Hadoop不適用于低延遲數(shù)據(jù)訪問(wèn)。
(2)Hadoop不能高效存儲(chǔ)大量小文件。
(3)Hadoop不支持多用戶(hù)寫(xiě)入并任意修改文件。
Hadoop的核心組件
Hadoop自誕生以來(lái),主要出現(xiàn)了Hadoop1、Hadoop2、Hadoop3三個(gè)系列多個(gè)版本。
HDFS和MapReduce是Hadoop1的核心組件,Hadoop生態(tài)圈里的很多組件都是基于HDFS和MapReduce發(fā)展出來(lái)的。在繼Hadoop1之后出現(xiàn)了Hadoop2,Hadoop2在Hadoop1的基礎(chǔ)上做了改進(jìn)。相比Hadoop1,Hadoop2的三大核心組件分別是HDFS、MapReduce、Yarn。目前市面上絕大部分企業(yè)使用的是Hadoop2,本書(shū)使用的是Hadoop2.7.3這一版本。
Hadoop2的一個(gè)公共模塊和三大核心組件組成了四個(gè)模塊,簡(jiǎn)介如下。
(1)HadoopCommon:為其他Hadoop模塊提供基礎(chǔ)設(shè)施。
(2)HDFS:具有高可靠性、高吞吐量的分布式文件系統(tǒng)。
(3)MapReduce:基于Yarn系統(tǒng),分布式離線并行計(jì)算框架。
(4)Yarn:負(fù)責(zé)作業(yè)調(diào)度與集群資源管理的框架。
“Hadoop技術(shù)優(yōu)缺點(diǎn)有哪些”的內(nèi)容就介紹到這里了,感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識(shí)可以關(guān)注創(chuàng)新互聯(lián)-成都網(wǎng)站建設(shè)公司網(wǎng)站,小編將為大家輸出更多高質(zhì)量的實(shí)用文章!
當(dāng)前題目:Hadoop技術(shù)優(yōu)缺點(diǎn)有哪些-創(chuàng)新互聯(lián)
鏈接地址:http://aaarwkj.com/article28/jcdcp.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供軟件開(kāi)發(fā)、虛擬主機(jī)、企業(yè)網(wǎng)站制作、建站公司、網(wǎng)站營(yíng)銷(xiāo)、品牌網(wǎng)站制作
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶(hù)投稿、用戶(hù)轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話(huà):028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容