對hadoop初學(xué)者來說,或者說正在使用hadoop的開發(fā)者來說,hadoop環(huán)境的搭建不是一件省心的事,甚至很多博客上都重要的事說三便“不要花精力在搭建環(huán)境之上”,可見很多人在搭建環(huán)境時會遇到很多問題,并且會花費(fèi)很多時間,本文將把所有的“玩法”都過一下,相信看完之后,你心里就有數(shù)了,將會依據(jù)自己的需求來選擇合適的搭建方式。
讓客戶滿意是我們工作的目標(biāo),不斷超越客戶的期望值來自于我們對這個行業(yè)的熱愛。我們立志把好的技術(shù)通過有效、簡單的方式提供給客戶,將通過不懈努力成為客戶在信息化領(lǐng)域值得信任、有價值的長期合作伙伴,公司提供的服務(wù)項(xiàng)目有:域名與空間、虛擬空間、營銷軟件、網(wǎng)站建設(shè)、新林網(wǎng)站維護(hù)、網(wǎng)站推廣。
部署方式 | 優(yōu)勢 | 不足 | 適合場合 |
Apache Hadoop 單機(jī) | 單臺機(jī)器即可 簡單 所需組件少 | 一般不用于生產(chǎn) 無HA 無法體現(xiàn)分布式 | 初學(xué) 開發(fā)測試 小規(guī)模試用 |
Apache Hadoop 集群 | 靈活的版本選擇 自主可控性較好 應(yīng)用場景廣泛 | 需專業(yè)人員管理 組件間兼容性差 配置、運(yùn)維復(fù)雜 | 學(xué)習(xí) 開發(fā)測試 生產(chǎn)環(huán)境 |
CDH或 HDP | Web管理和監(jiān)控 開源廠商支持 兼容性和穩(wěn)定高 | 仍需大量配置 受制于廠商 更新版本稍慢 | 開發(fā)測試 生產(chǎn)環(huán)境 |
其它廠商類CDH | 有自己擴(kuò)展特性 廠商支持 | 非免費(fèi) 嚴(yán)重受制于廠商 | 生產(chǎn)環(huán)境 |
編寫shell部署運(yùn)維腳本 | 自控性好 配置簡單 靈活性好 | 需編寫腳本 測試費(fèi)時 需不斷完善 | 學(xué)習(xí) 開發(fā)測試 生產(chǎn)環(huán)境 |
通過上面的對比,總結(jié)如下:
初學(xué)hadoop,希望快速開始,采用第一種apache單機(jī),無基礎(chǔ)的情況下1個小即可完成,有l(wèi)inux基礎(chǔ)除掉安裝虛擬機(jī)、linux的時間,10分鐘可完成;
用于生產(chǎn)環(huán)境或測試環(huán)境,采用第三種cdh方式,管理集群都是圖形化,但是缺少了對內(nèi)部深層次的了解;
對于深入學(xué)習(xí)者,已經(jīng)有一定經(jīng)驗(yàn)和積累了,可以選最后一種,不斷可以深入的了解內(nèi)部各進(jìn)程依賴關(guān)系,還可以提升shell腳本文件編程水平。
關(guān)于每一種環(huán)境的詳細(xì)搭建方式,將會分幾個章節(jié)在后面分別介紹,另外如果可能也會錄制一些免費(fèi)視頻,詳細(xì)的講解一下操作步驟。
當(dāng)前標(biāo)題:分析幾種Hadoop集群部署方式優(yōu)劣
文章鏈接:http://aaarwkj.com/article40/goooeo.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站維護(hù)、網(wǎng)站制作、網(wǎng)站設(shè)計(jì)、企業(yè)網(wǎng)站制作、網(wǎng)站改版、網(wǎng)頁設(shè)計(jì)公司
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)