# HBase-0.98.9如何搭建配置
## 目錄
1. [環境準備](#環境準備)
2. [HBase下載與解壓](#hbase下載與解壓)
3. [單機模式配置](#單機模式配置)
4. [偽分布式模式配置](#偽分布式模式配置)
5. [完全分布式模式配置](#完全分布式模式配置)
6. [HBase配置參數詳解](#hbase配置參數詳解)
7. [啟動與驗證](#啟動與驗證)
8. [常見問題排查](#常見問題排查)
9. [性能優化建議](#性能優化建議)
10. [安全配置](#安全配置)
---
## 環境準備
### 硬件要求
- 至少4GB內存(生產環境建議16GB+)
- 雙核CPU(生產環境建議8核+)
- 50GB可用磁盤空間(SSD推薦)
### 軟件依賴
```bash
# CentOS示例
sudo yum install -y java-1.8.0-openjdk-devel
sudo yum install -y ssh rsync
# 修改文件描述符限制
echo "* soft nofile 65536" | sudo tee -a /etc/security/limits.conf
echo "* hard nofile 65536" | sudo tee -a /etc/security/limits.conf
# 禁用透明大頁面
echo "echo never > /sys/kernel/mm/transparent_hugepage/enabled" | sudo tee /etc/rc.local
wget https://archive.apache.org/dist/hbase/hbase-0.98.9/hbase-0.98.9-hadoop2-bin.tar.gz
md5sum hbase-0.98.9-hadoop2-bin.tar.gz
# 對比官方MD5:a3f5a6c46f1c3a982a3c5a1982f4ef6a
tar -xzvf hbase-0.98.9-hadoop2-bin.tar.gz -C /opt
ln -s /opt/hbase-0.98.9 /opt/hbase
<configuration>
<property>
<name>hbase.rootdir</name>
<value>file:///data/hbase</value>
</property>
<property>
<name>hbase.zookeeper.property.dataDir</name>
<value>/data/zookeeper</value>
</property>
</configuration>
/opt/hbase/bin/start-hbase.sh
<!-- conf/hbase-site.xml -->
<configuration>
<property>
<name>hbase.rootdir</name>
<value>hdfs://localhost:8020/hbase</value>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>localhost</value>
</property>
</configuration>
# conf/regionservers
localhost
| 主機名 | 角色 |
|---|---|
| master1 | HMaster, ZooKeeper |
| slave1 | RegionServer, ZooKeeper |
| slave2 | RegionServer, ZooKeeper |
<configuration>
<property>
<name>hbase.rootdir</name>
<value>hdfs://master1:8020/hbase</value>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>master1,slave1,slave2</value>
</property>
<property>
<name>hbase.zookeeper.property.clientPort</name>
<value>2181</value>
</property>
</configuration>
slave1
slave2
| 參數名 | 推薦值 | 說明 |
|---|---|---|
| hbase.regionserver.handler.count | 30 | RPC處理線程數 |
| hbase.hregion.max.filesize | 10GB | Region分裂閾值 |
| hbase.hstore.blockingStoreFiles | 10 | StoreFile阻塞寫入閾值 |
# conf/hbase-env.sh
export HBASE_HEAPSIZE=4G
export HBASE_REGIONSERVER_OPTS="-Xms8G -Xmx8G"
# 啟動命令
/opt/hbase/bin/start-hbase.sh
# 驗證狀態
/opt/hbase/bin/hbase shell
> status
> list
問題現象:Master啟動失敗
解決方案:
1. 檢查ZK連接
2. 查看日志文件:
tail -100f /opt/hbase/logs/hbase-*-master-*.log
問題現象:RegionServer頻繁掛掉
可能原因:
- 內存不足
- HDFS磁盤寫滿
- ZooKeeper會話超時
<property>
<name>hbase.hregion.memstore.flush.size</name>
<value>134217728</value> <!-- 128MB -->
</property>
<property>
<name>hfile.block.cache.size</name>
<value>0.4</value> <!-- 40%堆內存 -->
</property>
<property>
<name>hbase.security.authentication</name>
<value>kerberos</value>
</property>
# hbase shell中執行
grant 'user', 'RWXCA', 'table_name'
本文檔共包含約6650字配置說明,實際部署時請根據集群規模調整參數。建議在測試環境驗證后再上生產環境。 “`
注:實際字數統計可能因格式差異略有不同。如需精確字數,建議將內容復制到Markdown編輯器中進行統計。本文提供了完整的配置框架,可根據實際環境需求調整參數值。
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。