hbase 數(shù)據(jù)存儲(chǔ)有三種跑法，跑在本地磁盤(pán)上、跑在偽分布式上、跑在完全分布式上--------
額。。。官網(wǎng)的文檔挺坑爹的，結(jié)合官網(wǎng)、百度、谷歌的各種文檔看，只要理解原理，搭建也不算難（當(dāng)然照的官網(wǎng)文檔個(gè)看就比較坑爹了）
單機(jī)模式 ------->> 這個(gè)最簡(jiǎn)單，免寫(xiě)了，下了包直接解壓配置個(gè)路徑就可以啟動(dòng)了，zk 和 hbase 都是起在同一個(gè) jvm 中的，數(shù)據(jù)落到本地磁盤(pán)。
偽分布式部署方式 ------->> 先部署 hdfs ， 再部署 hbase ，它們的各個(gè)進(jìn)程跑在不同的 jvm 中 ， hbase只是將數(shù)據(jù)落到了 hdfs 上。
完全分布式 ------->> 完全分布式用大白話來(lái)說(shuō)，我理解的就是個(gè) 偽分布式的 升級(jí)款，只是把偽分布式的一臺(tái)服務(wù)器變成了 n 臺(tái)。。。

創(chuàng)新互聯(lián)-云計(jì)算及IDC服務(wù)提供商，涵蓋公有云、IDC機(jī)房租用、成都聯(lián)通服務(wù)器托管、等保安全、私有云建設(shè)等企業(yè)級(jí)互聯(lián)網(wǎng)基礎(chǔ)服務(wù)，溝通電話：028-86922220

完全分布式一定要部署在 物理機(jī)上

上邊蛋扯的差不多了，下面直接入正題，開(kāi)始部署
下載什么版本的包自己解決，要想下載最輕松的全部安裝包，直接到 cdh 上去下載，百度搜索 cdh ，你懂的、、、然后配置文件每個(gè)版本的基本上差不多，沒(méi)有太大的出入
下面是以 hadoop-2.7.2 、 hbase-1.1.2 為例

一、新系統(tǒng)的話，自己先處理一下系統(tǒng)，這個(gè)習(xí)慣相信所有運(yùn)維同行的哥哥們都是有這習(xí)慣的。。。關(guān)閉不用的防火墻、大文件打開(kāi)數(shù)、jdk全局變量、dns、主機(jī)名解析
建議配置時(shí)用 ip 的最后用內(nèi)網(wǎng)的域名，這樣的話，開(kāi)發(fā)的代碼也好接入做好的 hbase，用主機(jī)名的話，開(kāi)發(fā)的還得自己的 hosts ，我這里用的 內(nèi)網(wǎng)的 dns 域名。

二、部署 hdfs

包傳到 服務(wù)器上，解壓

hadoop-2.7.2.tar.gz
tar xvf  hadoop-2.7.2.tar.gz  -C /home
cd /home/hadoop-2.7.2
vim etc/hadoop/hadoop-env.sh

export JAVA_HOME=/usr/lib/jvm/jdk1.7.0_72

配置HDFS 之 core-site.xml

mkdir data
vim etc/hadoop/core-site.xml
<configuration>
 <property>
    <name>fs.defaultFS</name>
    <value>hdfs://pretend.hdfs.gag.cn:9000</value>
            <!--這里設(shè)置 hdfs 文件系統(tǒng)接口-->
 </property>
 <property>
    <name>hadoop.tmp.dir</name>
    <value>/home/hadoop-2.7.2/data/tmp</value>
            <!--這里為 hdfs 數(shù)據(jù)存儲(chǔ)路徑-->
 </property>
</configuration>

配置HDFS 之 hdfs-site.xml

vim etc/hadoop/hdfs-site.xml
   <configuration>
   <property>
    <name>dfs.replication</name>
    <value>1</value>
            <!--指定創(chuàng)建的副本數(shù)-->
   </property>

</configuration>

配置HDFS 之 YARN， 這原配置文件里什么也沒(méi)有，都是注釋內(nèi)容，直接改名就行

mv etc/hadoop/mapred-site.xml.template etc/hadoop/mapred-site.xml
vim etc/hadoop/mapred-site.xml

  <configuration>
  <property>
    <name>mapreduce.framework.name</name>
    <value>yarn</value>
    <!--使用yarn運(yùn)行mapreduce程序-->
  </property>
</configuration>

配置HDFS 之 yarn-site.xml

 vim etc/hadoop/yarn-site.xml
  <configuration>
  <property>
    <name>yarn.nodemanager.aux-services</name>
    <value>mapreduce_shuffle</value>
            <!--NodeManager上運(yùn)行的附屬服務(wù)。需配置成mapreduce_shuffle，才可運(yùn)行MapReduce程序-->
  </property>
</configuration>

啟動(dòng) hdfs
初次啟動(dòng) hdfs 先要初始化文件系統(tǒng)，也可以說(shuō)是格式化文件系統(tǒng)

bin/hdfs namenode -format

格式化完畢，啟動(dòng)NameNod和DataNode進(jìn)程
啟動(dòng)之前如果修改 jvm 參數(shù)的話，在 vim etc/hadoop/hadoop-env.sh 修改 HADOOP_HEAPSIZE 這一項(xiàng)就可以了，默認(rèn)應(yīng)該是 1024M

sbin/start-dfs.sh

啟動(dòng)以后，有這里顯示有 三個(gè)配置文件，是 out 后綴的，看日志的話，看 log 后綴的，看有沒(méi)有 error 級(jí)別的報(bào)錯(cuò)

啟動(dòng)YARN

 sbin/start-yarn.sh

同樣是去看這兩個(gè)的 log 后綴的日志
這里了 hdfs 就算啟動(dòng)完畢了，這時(shí)再 jps 命令可以看到除 jps 進(jìn)程外有 5 個(gè)

查看端口已經(jīng)有這么多了， 50070 是 hdfs 的 web 端口，以后輸入 ip:port 或者 域名:port 來(lái)查看 web 頁(yè)面

======================================================================

以上 hdfs 啟動(dòng)沒(méi)問(wèn)題后，就可以啟動(dòng) hbase 了

 tar xvf hbase-1.1.2-bin.tar.gz -C /home/        
     cd /home/hbase-1.1.2/   
     vim conf/hbase-env.sh   
     export JAVA_HOME=/usr/lib/jvm/jdk1.7.0_72

配置Hbase

mkdir data
vim conf/hbase-site.xml 

     <configuration>
   <property>
      <name>hbase.rootdir</name>
      <value>hdfs://pretend.hdfs.gag.cn:9000/hbase</value>
            <!--使用 hdfs 文件系統(tǒng)，端口為上面配置的 hdfs 接口-->
  </property>
  <property>
     <name>hbase.zookeeper.property.dataDir</name>
     <value>/home/hbase-1.1.2/data</value>
             <!--zookeeper數(shù)據(jù)存儲(chǔ)路徑，用hbase自帶的zookeeper-->
  </property>
  <property>
     <name>hbase.cluster.distributed</name>
     <value>true</value>
             <!--設(shè)置hbase模式為集群模式-->
  </property>
</configuration>

hbase 集群內(nèi)的服務(wù)器，如果是啟動(dòng)完全分布式，這里要填寫(xiě)hbase所有的服務(wù)器域名或者 ip 或者 主機(jī)名，順便說(shuō)一下，hbase和 hadoop 集群全部是已 ssh 遠(yuǎn)程 調(diào)用命令的方式啟動(dòng)其他節(jié)點(diǎn)的

vim conf/regionservers      
    pretend.hbase.gag.cn

這里的話，我把內(nèi)存調(diào)整了一下，因?yàn)殚_(kāi)發(fā)那邊要用，服務(wù)器是 8G 的

vim conf/hbase-env.sh 
    export HBASE_MASTER_OPTS="$HBASE_MASTER_OPTS -XX:PermSize=512m -XX:MaxPermSize=512m"
export HBASE_REGIONSERVER_OPTS="$HBASE_REGIONSERVER_OPTS -XX:PermSize=512m -XX:MaxPermSize=512m"

啟動(dòng)Hbase

先啟動(dòng) zookeeper，如果是完全分布式的話，所有的 hbase節(jié)點(diǎn)會(huì)以臨時(shí)節(jié)點(diǎn)的方式注冊(cè)在 zk 里，偽分布式也一樣，只不過(guò)zk 里只有一個(gè)節(jié)點(diǎn)，zk 也只有一個(gè)節(jié)點(diǎn)

 bin/hbase-daemon.sh start zookeeper         啟動(dòng)后查看日志
 bin/hbase-daemon.sh start master               啟動(dòng)后查看日志
 bin/hbase-daemon.sh start regionserver      啟動(dòng)后查看日志

此時(shí)的 jps 可以查看到除 jps 外 8 個(gè)進(jìn)程

hbase 的 web 頁(yè)面端口是 16010

如果要加 開(kāi)機(jī)啟動(dòng)的話，最好加上sleep等待，我是這樣加的

正常停止方式：
一定要按照順序停止
停止 hbase、zookeeper、hdfs

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn，海內(nèi)外云服務(wù)器15元起步，三天無(wú)理由+7*72小時(shí)售后在線，公司持有idc許可證，提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國(guó)服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡(jiǎn)單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢(shì)，專(zhuān)為企業(yè)上云打造定制，能夠滿足用戶豐富、多元化的應(yīng)用場(chǎng)景需求。

文章題目：hbase偽集群搭建-創(chuàng)新互聯(lián)
當(dāng)前地址：http://aaarwkj.com/article24/gipje.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供網(wǎng)站改版、App設(shè)計(jì)、靜態(tài)網(wǎng)站、Google、面包屑導(dǎo)航、App開(kāi)發(fā)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)