psStyle / repos

0 stars 0 forks source link

HBase #15

Open psStyle opened 9 years ago

psStyle commented 9 years ago

1.HBase(NoSQL)的数据模型 1.1 表(table),是存储管理数据的。 1.2 行键(row key),类似于MySQL中的主键。 行键是HBase表天然自带的。 1.3 列族(column family),列的集合。 HBase中列族是需要在定义表时指定的,列是在插入记录时动态增加的。 HBase表中的数据,每个列族单独一个文件。 1.4 时间戳(timestamp),列(也称作标签、修饰符)的一个属性。 行键和列确定的单元格,可以存储多个数据,每个数据含有时间戳属性,数据具有版本特性。 如果不指定时间戳或者版本,默认取最新的数据。 1.5 存储的数据都是字节数组。 1.6 表中的数据是按照行键的顺序物理存储的。

2.HBase的物理模型 2.1 HBase是适合海量数据(如20PB)的秒级简单查询的数据库。 2.2 HBase表中的记录,按照行键进行拆分, 拆分成一个个的region。 许多个region存储在region server(单独的物理机器)中的。 这样,对表的操作转化为对多台region server的并行查询。

3.HBase的体系结构 3.1 HBase是主从式结构,HMaster、HRegionServer

4.HBase伪分布安装 4.1 解压缩、重命名、设置环境变量 4.2 修改$HBASE_HOME/conf/hbase-env.sh,修改内容如下: export JAVA_HOME=/usr/local/jdk export HBASE_MANAGES_ZK=true 4.2 修改$HBASE_HOME/conf/hbase-site.xml,修改内容如下:

hbase.rootdir hdfs://hadoop0:9000/hbase
<property>
  <name>hbase.cluster.distributed</name>
  <value>true</value>
</property>
<property>
  <name>hbase.zookeeper.quorum</name>
  <value>hadoop0</value>
</property>
<property>
  <name>dfs.replication</name>
  <value>1</value>
</property>

4.3 (可选)文件regionservers的内容为hadoop0 4.4 启动hbase,执行命令start-hbase.sh ***_启动hbase之前,确保hadoop是运行正常的,并且可以写入文件_**** 4.5 验证:(1)执行jps,发现新增加了3个java进程,分别是HMaster、HRegionServer、HQuorumPeer (2)使用浏览器访问http://hadoop0:60010

zxsz4084 commented 8 years ago

请问最新hbase版本 1.1.2启动找不到类

[root@localhost local]# ll lrwxrwxrwx. 1 root root 11 Sep 12 21:34 hbase -> hbase-1.1.2 drwxr-xr-x. 30 root root 4096 Sep 12 21:34 hbase-1.1.2

[root@localhost local]# ./hbase/bin/start-hbase.sh Error: Could not find or load main class org.apache.hadoop.hbase.util.HBaseConfTool Error: Could not find or load main class org.apache.hadoop.hbase.zookeeper.ZKServerTool starting master, logging to /usr/local/hbase/logs/hbase-root-master-localhost.out Java HotSpot(TM) 64-Bit Server VM warning: ignoring option PermSize=128m; support was removed in 8.0 Java HotSpot(TM) 64-Bit Server VM warning: ignoring option MaxPermSize=128m; support was removed in 8.0 Error: Could not find or load main class org.apache.hadoop.hbase.master.HMaster starting regionserver, logging to /usr/local/hbase/logs/hbase-root-1-regionserver-localhost.out Error: Could not find or load main class org.apache.hadoop.hbase.regionserver.HRegionServer why show this error ? It exist 。 [root@localhost local]# find ./ -name HBaseConfTool.class ./hbase-1.1.2/hbase-server/target/classes/org/apache/hadoop/hbase/util/HBaseConfTool.class

/etc/profle: export JAVA_HOME=/usr/local/jdk1.8.0_20 export HBASE_HOME=/usr/local/hbase export PATH=$JAVA_HOME/bin:$HBASE_HOME/bin:$PATH export CLASSPATH=.:$JAVA_HOME/lib:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:$HBASE_HOME/hbase-server/target/classes

I add $HBASE_HOME/hbase-server/target/classes, but it still not find class file。version 0.98xx has no this problem,why the version 1.1.2 so eggache? I am just a newer,geting start follow official docs, but can not run。I am so sad。。。sos。。。