本篇內(nèi)容介紹了“HBase的工作機(jī)制是怎樣的”的有關(guān)知識(shí),在實(shí)際案例的操作過(guò)程中,不少人都會(huì)遇到這樣的困境,接下來(lái)就讓小編帶領(lǐng)大家學(xué)習(xí)一下如何處理這些情況吧!希望大家仔細(xì)閱讀,能夠?qū)W有所成!
創(chuàng)新互聯(lián)主營(yíng)修文網(wǎng)站建設(shè)的網(wǎng)絡(luò)公司,主營(yíng)網(wǎng)站建設(shè)方案,成都app軟件開(kāi)發(fā),修文h5微信小程序定制開(kāi)發(fā)搭建,修文網(wǎng)站營(yíng)銷(xiāo)推廣歡迎修文等地區(qū)企業(yè)咨詢HBase – Hadoop Database,是一個(gè)高可靠性、高性能、面向列、可伸縮的分布式存儲(chǔ)系統(tǒng),利用HBase技術(shù)可在廉價(jià)PC Server上搭建起大規(guī)模結(jié)構(gòu)化存儲(chǔ)集群。
與FUJITSU Cliq等商用大數(shù)據(jù)產(chǎn)品不同,HBase是Google Bigtable的開(kāi)源實(shí)現(xiàn),類(lèi)似Google Bigtable利用GFS作為其文件存儲(chǔ)系統(tǒng),HBase利用Hadoop HDFS作為其文件存儲(chǔ)系統(tǒng);Google運(yùn)行MapReduce來(lái)處理Bigtable中的海量數(shù)據(jù),HBase同樣利用Hadoop MapReduce來(lái)處理HBase中的海量數(shù)據(jù);Google Bigtable利用 Chubby作為協(xié)同服務(wù),HBase利用Zookeeper作為對(duì)應(yīng)。
一、hbase的特性
1、hbase數(shù)據(jù)的終持久化存儲(chǔ)是基于hsfs文件系統(tǒng),存儲(chǔ)容量幾乎無(wú)限,可以隨時(shí)在線擴(kuò)容。
2、hbase的數(shù)據(jù)增刪改查功能模塊是分布式系統(tǒng)。
3、nosql數(shù)據(jù)庫(kù),表結(jié)構(gòu)。
二、HBase的存儲(chǔ)
HBase中的所有數(shù)據(jù)文件都存儲(chǔ)在Hadoop HDFS文件系統(tǒng)上。
1. HFile, HBase中KeyValue數(shù)據(jù)的存儲(chǔ)格式,HFile是Hadoop的二進(jìn)制格式文件,實(shí)際上StoreFile就是對(duì)HFile做了輕量級(jí)包裝,即StoreFile底層就是HFile。
2. HLog File,HBase中WAL(Write Ahead Log) 的存儲(chǔ)格式,物理上是Hadoop的Sequence File。
三、HBase工作機(jī)制
hbase工作機(jī)制詳細(xì)解析:
1、hbase的整體工作機(jī)制是接受客戶端發(fā)來(lái)的請(qǐng)求命令,從hdfs中讀取表文件信息返回給客戶端;
2、每個(gè)hbase服務(wù)器負(fù)責(zé)表文件中對(duì)應(yīng)region區(qū)域,hdfs上表文件的存儲(chǔ)也是分為每個(gè)region單獨(dú)存儲(chǔ),每個(gè)region中又分為多個(gè)列族存儲(chǔ);
3、hbase集群中有兩種角色,regionserver和master,regionserver負(fù)責(zé)響應(yīng)客戶端請(qǐng)求,讀取表文件;
master負(fù)責(zé)監(jiān)控regionserver的狀態(tài),以便及時(shí)處理掉線的regionserver,保證hbase集群正常運(yùn)行;當(dāng)一個(gè)region掛掉時(shí),master會(huì)及時(shí)監(jiān)控到,這里利用了zookeeper管理regionserver狀態(tài)信息。
當(dāng)一個(gè)master掛掉時(shí),不會(huì)影響客戶端查數(shù)據(jù),但如果此時(shí)regionserver掛掉,master又不能及時(shí)監(jiān)控到,便會(huì)影響數(shù)據(jù)查詢;解決方法就是再設(shè)置一臺(tái)master,一臺(tái)active狀態(tài),一臺(tái)standby狀態(tài)用作備用,當(dāng)active的master掛掉,standby的master將會(huì)變?yōu)閍ctive狀態(tài),監(jiān)控regionserver。
4、master和zookeeper就組成了高可用。
大數(shù)據(jù)開(kāi)發(fā)之路不易,大家且行且珍惜。好程序員為大家的學(xué)習(xí)保駕護(hù)航。
“HBase的工作機(jī)制是怎樣的”的內(nèi)容就介紹到這里了,感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識(shí)可以關(guān)注創(chuàng)新互聯(lián)-成都網(wǎng)站建設(shè)公司網(wǎng)站,小編將為大家輸出更多高質(zhì)量的實(shí)用文章!
分享文章:HBase的工作機(jī)制是怎樣的-創(chuàng)新互聯(lián)
轉(zhuǎn)載注明:http://aaarwkj.com/article16/phogg.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供App開(kāi)發(fā)、Google、定制開(kāi)發(fā)、云服務(wù)器、服務(wù)器托管、網(wǎng)站制作
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容