HBase基础知识:
http://www.oschina.net/p/hbase?fromerr=ID1FbvFf
0.硬件环境:三台机器Ubuntu15.10内存1.5G硬板20G
1.name Ubuntu15.10内存1.5G硬板20G
2.sname Ubuntu15.10内存1.5G硬板20G
3.amrm Ubuntu15.10内存1.5G硬板20G
安装前的基本要求,安装zookeeper集群在三台机器上,ssh可无密码登陆
1.配置hosts
Sudo Vim /etc/hosts
127.0.0.1 localhost
192.168.159.136 name
192.168.159.135 sname
192.168.159.132 amrm
2.解除 Linux 系统的最大进程数和最大文件打开数限制:
vim /etc/security/limits.conf
# 添加如下的行
* soft noproc 32000
* hard noproc 32000
* soft nofile 32768
* hard nofile 32768
说明:* 代表针对所有用户,noproc 是代表最大进程数,nofile 是代表最大文件打开数
3.配置环境变量
sudo vim ~/.bahsrc 或/etc/profile
# the variable for hadoop
export JAVA_HOME=/usr/lib/java/jdk1.7.0_79
export JRE_HOME=${JAVA_HOME}/jre
export CLASS_PATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib
export HADOOP_HOME=/hadoop/hadoop-2.7.1
export HBASE_HOME=/hadoop/hbase-1.2.1
export ZOOKEEPER_HOME=/hadoop/zookeeper-3.4.6
export PATH=${JAVA_HOME}/bin:${HADOOP_HOME}/bin:${HADOOP_HOME}/sbin:${ZOOKEEPER_HOME}/bin:${HBASE_HOME}/bin:${PATH}
export HADOOP_MAPRED_HOME=${HADOOP_HOME}
export HADOOP_COMMON_HOME=${HADOOP_HOME}
export HADOOP_HDFS_HOME=${HADOOP_HOME}
export HADOOP_COMMON_LIB_NATIVE_DIR=${HADOOP}/lib/native
export YARN_HOME=${HADOOP_HOME}
export HADOOP_OPT="-Djava.library.path=${HADOOP_HOME}/lib/native"
4.修改$HBASE_HOME/conf/hbase-env.sh
export JAVA_HOME=/usr/lib/java/jdk1.7.0_79
export HBASE_OPTS="-Xmn150m"<!--jvm 年轻代大小,-Xmx,堆最大,-Xms,初始化堆大小-->
<!-- jvm GC策咯,当年老代使用了80%时回收内存,XX:+UseParNewGC:设置年轻代为并发回收 -XX:+UseConcMarkSweepGC:设置年老代为并发回收-->
export SERVER_GC_OPTS="-XX:CMSInitiatingOccupancyFraction=80 -XX:+UseParNewGC -XX:+UseConcMarkSweepGC"
export HBASE_MANAGES_ZK=false<!--HBase不用管理自己的zookeeper实例,zookeeper集群自己管理-->
5.修改文件hbase-site.xml,修改内容如下
<configuration>
<property>
<name>hbase.rootdir</name>
<value>hdfs://name:9000/hbase</value>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>name,sname,amrm</value>
</property>
<property>
<name>dfs.replication</name>
<value>3</value>
</property>
</configuration>
6.修改文件regionservers,修改内容如下
sname
amrm
注:修改backup-masters每行一个主机名,代表备用master提高,可用性及健壮性。
sname
7.启动Hbase
start-hbase.sh
8.启动hbase shell,进入shell环境
hbase shell
8.1创建表
create 'users','user_id','address','info'
(说明:表users,有三个列族user_id,address,info)
8.2列出全部表
list
8.3得到表的描述
describe 'users'
8.4添加记录
put ‘表名’,’行键(标识)’,’列族:字段’,’数值’
示例:
1.put 'users','xiaoming','info:age','24';
2.put 'users','xiaoming','info:birthday','1987-06-17';
3.put 'users','xiaoming','info:company','alibaba';
4.put 'users','xiaoming','address:contry','china';
5.put 'users','xiaoming','address:province','zhejiang';
6.put 'users','xiaoming','address:city','hangzhou';
7.put 'users','zhangyifei','info:birthday','1987-4-17';
8.put 'users','zhangyifei','info:favorite','movie';
9.put 'users','zhangyifei','info:company','alibaba';
10.put 'users','zhangyifei','address:contry','china';
11.put 'users','zhangyifei','address:province','guangdong';
12.put 'users','zhangyifei','address:city','jieyang';
13.put 'users','zhangyifei','address:town','xianqiao'
8.5获取一条记录
1. 取得一个id的所有数据
1.>get 'users','xiaoming'
2. 获取一个id,一个列族的所有数据
1.>get 'users','xiaoming','info'
3. 获取一个id,一个列族中一个列的所有数据
1.>get 'users','xiaoming','info:age'
8.6更新记录
1.>put 'users','xiaoming','info:age' ,'29'
2.>get 'users','xiaoming','info:age'
3.>put 'users','xiaoming','info:age' ,'30'
4.>get 'users','xiaoming','info:age'
8.7获取单元格数据的版本数据
1.>get 'users','xiaoming',{COLUMN=>'info:age',VERSIONS=>1}
2.>get 'users','xiaoming',{COLUMN=>'info:age',VERSIONS=>2}
3.>get 'users','xiaoming',{COLUMN=>'info:age',VERSIONS=>3}
8.8获取单元格数据的某个版本数据
1.〉get 'users','xiaoming',{COLUMN=>'info:age',TIMESTAMP=>1364874937056}
8.9全表扫描
1.>scan 'users'
8.10删除xiaoming值的'info:age'字段
1.>delete 'users','xiaoming','info:age'
2.>get 'users','xiaoming'
8.11删除整行
1.>deleteall 'users','xiaoming'
8.12统计表的行数
1.>count 'users'
8.13清空表
1.>truncate 'users'
分享到:
相关推荐
hbase-1.2.1-bin.tar.gz.zip 提示:先解压再使用,最外层是zip压缩文件
NULL 博文链接:https://aperise.iteye.com/blog/2282670
HBase伪分布式环境搭建及数据操作测试 本人成功搭建伪分布式的操作以及截图
基于虚拟机搭建的环境(一个master和三个slaves),亲身测试可用,该配置文件仅供参考
HBase 是一个开源的、分布式的、版本化的 NoSQL 数据库(也即非关系型数据库),它利用 Hadoop 分布式文件系统(Hadoop Distributed File System,HDFS)提供分布式数据存储。与传统的关系型数据库类似,HBase 也以...
HBase集群环境搭建
hbase2.0环境搭建,ubuntu16.04操作系统下安装配置hbase2.0
HBase单机环境搭建,基础篇
PDF版本的HBase集群环境搭建补充上来了,有需要的小伙伴自取。
hive1.2.1融合hbase1.2.1,还需要的其他jar,请查看本人博客详细介绍
java开发hbase-1.2.1所需的jar包
hadoop_hbase从零搭建
zookeeper+hbase集群搭建+搭建过程报错解决+原理,通俗易懂,详细配置注解!!!
一、安装前置条件说明 二、Standalone 模式 三、伪集群模式安装(Pseudo-Distributed)
大数据综合实验环境搭建(3个集群、Zookeeper、Hive、HBase)
采用Spring Boot+Hbase+kafka搭建,封装了通过JavaBean的方式操作Hbase
Hadoop2.2+Zookeeper3.4.5+HBase0.96集群环境搭建
Hadoop+Zookeeper+HBase环境搭建,详细步骤和实例,从零开始搭建Hadoop集群