創(chuàng)新互聯(lián)建站:2013年開(kāi)創(chuàng)至今為各行業(yè)開(kāi)拓出企業(yè)自己的“網(wǎng)站建設(shè)”服務(wù),為成百上千公司企業(yè)提供了專業(yè)的成都做網(wǎng)站、成都網(wǎng)站制作、網(wǎng)頁(yè)設(shè)計(jì)和網(wǎng)站推廣服務(wù), 按需設(shè)計(jì)網(wǎng)站由設(shè)計(jì)師親自精心設(shè)計(jì),設(shè)計(jì)的效果完全按照客戶的要求,并適當(dāng)?shù)奶岢龊侠淼慕ㄗh,擁有的視覺(jué)效果,策劃師分析客戶的同行競(jìng)爭(zhēng)對(duì)手,根據(jù)客戶的實(shí)際情況給出合理的網(wǎng)站構(gòu)架,制作客戶同行業(yè)具有領(lǐng)先地位的。
HBase配置安裝
hbase0.98.5使用hadoop2.2.0安裝在rhel6.2系統(tǒng)。
下載 hbase-0.98.5-hadoop2-bin.tar.gz并上傳到服務(wù)器中
使用命令進(jìn)行解壓
[root@master soft]# tar -zxvfhbase-0.98.5-hadoop2-bin.tar.gz
對(duì)解壓后的目錄cp到指定目錄,目前使用的是hdtest用戶home目錄下
[root@master soft]# cp hbase-0.98.5-hadoop2/home/hdtest/hbase2/
對(duì)hbase2 目錄進(jìn)行修改所屬組及用戶
chown hdtest.hdtest hbase2/ -R
修改 conf目錄下的 3 個(gè)配置文件:
1. hbase-env.sh
同hadoop-env.sh,該文件設(shè)定了 hbase 的環(huán)境,修改的部分如下:
export JAVA_HOME=/usr/java/jdk1.7.0_67export
export HBASE_CLASSPATH=/home/hdtest/hadoop-2.2.0/etc/hadoop/
export HBASE_HEAPSIZE=1000
exportHBASE_MANAGES_ZK=false
其中,HBASE_CLASSPATH指向存放有 Hadoop 配置文件的目錄,這樣 HBase 可以找到 HDFS的配置信息,由于本文 Hadoop 和 HBase 部署在相同的物理節(jié)點(diǎn),所以就指向了 Hadoop 安裝路徑下的目錄。HBASE_HEAPSIZE 單位為 MB,可以根據(jù)需要和實(shí)際剩余內(nèi)存設(shè)置,默認(rèn)為 1000。HBASE_MANAGES_ZK=false指示 HBase 使用已有的 Zookeeper 而不是自帶的。
2. hbase-site.xml
該文件是 hbase 最主要的配置文件,配置如下:
<configuration>
<property>
<name>hbase.rootdir</name>
<value>hdfs://master:9000/hbase</value>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<property>
<name>hbase.tmp.dir</name>
<value>/home/hdtest/hbase2</value>
</property>
</configuration>
第一項(xiàng)指定了 hbase 所使用的文件系統(tǒng)為 HDFS,根目錄為 hdfs://master:9000/hbase,該目錄應(yīng)該由 HBase 自動(dòng)創(chuàng)建,只需要指定到正確的 HDFS NameNode 上即可。第二項(xiàng)指定 HBase的工作模式為分布式的,第三項(xiàng)指定 HBase 將元數(shù)據(jù)存放路徑為/home/hdtest/hbase2,需要在 node0(Master)上創(chuàng)建該目錄。
3. regionservers
此文件指定了HBase的RegionServers,相當(dāng)于hadoop配置文件中的slaves。本文將slave1/2作為 RegionServer,所以文件內(nèi)容為:
192.168.200.3
192.168.200.4
HBase 配置完成,將其分發(fā)到所有的 Master 和 RegionServer 節(jié)點(diǎn)上的相同目錄下,如
/home/hdtest/hbase2,并把剛才的 zoo.cfg 拷貝到每個(gè)節(jié)點(diǎn)的 HBASE_CLASSPATH 下(/home/hdtest/hadoop-2.2.0/etc/hadoop/),使得 HBase 可以找到 Zookeeper 的配置。
首先在NameNode(node0)上將 HDFS啟動(dòng):
$ ~/hadoop-1.0.2/bin/start-dfs.sh
然后在 Zookeeperensemble的每一個(gè)節(jié)點(diǎn)(node1/2/3)上分別啟動(dòng) Zookeeper:
$ ~/zookeeper-3.4.3/bin/zkServer.sh start
在Master(node0)上啟動(dòng) HBase:
$ ~/hbase-0.94.0/bin/start-hbase.sh
用瀏覽器訪問(wèn):
http://node0:60010
可以看到 HBase 的運(yùn)行信息,如果 Attributes ->Load average 中有數(shù)字,Tables 中有-ROOT-
和.META.兩張表,并且 Region Server 中的信息也都正常,則 HBase 正常啟動(dòng)了。
關(guān)閉的順序和啟動(dòng)的順序相反,先關(guān)閉 HBase:
$ ~/hbase-0.94.0/bin/stop-hbase.sh
然后關(guān)閉 Zookeeper和 HDFS。
問(wèn)題解決:
1,時(shí)間同步問(wèn)題導(dǎo)致其他RegionServers啟動(dòng)報(bào)錯(cuò)
2014-10-16 13:01:11,956 FATAL[regionserver60020] regionserver.HRegionServer: Master rejected startup becauseclock is out of sync
org.apache.hadoop.hbase.ClockOutOfSyncException:org.apache.hadoop.hbase.ClockOutOfSyncException: Serverslave2,60020,1413435669437 has been rejected; Reported time is too far out ofsync with master. Time difference of 400025ms > max allowed of 30000ms
at org.apache.hadoop.hbase.master.ServerManager.checkClockSkew(ServerManager.java:344)
atorg.apache.hadoop.hbase.master.ServerManager.regionServerStartup(ServerManager.java:237)
atorg.apache.hadoop.hbase.master.HMaster.regionServerStartup(HMaster.java:1286)
atorg.apache.hadoop.hbase.protobuf.generated.RegionServerStatusProtos$RegionServerStatusSe
從報(bào)錯(cuò)信息上看出時(shí)間不同步導(dǎo)致。
解決辦法:
需要在集群中配置一個(gè)ntp服務(wù)器(配置方法網(wǎng)絡(luò)上多得是),然后在master節(jié)點(diǎn)使用stop-hbase.sh停止所有hbase服務(wù),查看ntp服務(wù)是否生效,即master節(jié)點(diǎn)和regionserver節(jié)點(diǎn)時(shí)間是否一致后,再次啟動(dòng)hbase服務(wù)。
在master服務(wù)器使用jps查看hbase進(jìn)程
[hdtest@master ~]$ jps
6930 HMaster
9638 Jps
14932 JournalNode
4120 QuorumPeerMain
15013 NameNode
15345 ResourceManager
Hamster服務(wù)是hbase服務(wù)。
Journalnode是namenode做HA時(shí)配置的服務(wù)。
Quorumpeermain是zookeeper啟動(dòng)的服務(wù)。
Namenode和resourcemanager是hdfs啟動(dòng)服務(wù)
在slave1節(jié)點(diǎn)上查看hbase服務(wù)
[hdtest@slave1 ~]$ jps
21281 QuorumPeerMain
26528 Jps
11762 JournalNode
11854 NameNode
23557 HRegionServer
文章名稱:hbase配置與安裝
文章位置:http://m.rwnh.cn/article20/ipgpco.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供品牌網(wǎng)站建設(shè)、品牌網(wǎng)站設(shè)計(jì)、品牌網(wǎng)站制作、定制開(kāi)發(fā)、標(biāo)簽優(yōu)化、網(wǎng)頁(yè)設(shè)計(jì)公司
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)