HBase shell 命令介绍

HBase shell是HBase的一套命令行工具，类似传统数据中的sql概念，可以使用shell命令来查询HBase中数据的详细情况。安装完HBase之后，如果配置了HBase的环境变量，只要在shell中执行hbase shell就可以进入命令行界面，HBase的搭建可以参考我的上一篇文章：hbase分布式集群搭建

HBase介绍

HBase简介

HBase的名字的来源于Hadoop database，即hadoop数据库，不同于一般的关系数据库，它是一个适合于非结构化数据存储的数据库，而且它是基于列的而不是基于行的模式。

HBase是一个分布式的、面向列的开源数据库,源于google的一篇论文《bigtable：一个结构化数据的分布式存储系统》。HBase是Google Bigtable的开源实现，它利用Hadoop HDFS作为其文件存储系统，利用Hadoop MapReduce来处理HBase中的海量数据，利用Zookeeper作为协同服务。

hbase提供了一个shell的终端给用户交互。使用命令hbase shell进入命令界面。通过执行 help可以看到命令的帮助信息。

HBase的表结构

HBase以表的形式存储数据。表有行和列组成。列划分为若干个列族/列簇(column family)。

{:.center}

如上图所示，key1,key2,key3是三条记录的唯一的row key值，column-family1,column-family2,column-family3是三个列族，每个列族下又包括几列。比如column-family1这个列族下包括两列，名字是column1和column2，t1:abc,t2:gdxdf是由row key1和column-family1-column1唯一确定的一个单元cell。这个cell中有两个数据，abc和gdxdf。两个值的时间戳不一样，分别是t1,t2, hbase会返回最新时间的值给请求者。

这些名词的具体含义如下：

1、Row Key

与nosql数据库们一样,row key是用来检索记录的主键。访问hbase table中的行，只有三种方式：

  • 通过单个row key访问
  • 通过row key的range
  • 全表扫描

Row key行键 (Row key)可以是任意字符串(最大长度是 64KB，实际应用中长度一般为 10-100bytes)，在hbase内部，row key保存为字节数组。

存储时，数据按照Row key的字典序(byte order)排序存储。设计key时，要充分排序存储这个特性，将经常一起读取的行存储放到一起。(位置相关性)

注意：

字典序对int排序的结果是1,10,100,11,12,13,14,15,16,17,18,19,2,20,21,…,9,91,92,93,94,95,96,97,98,99。要保持整形的自然序，行键必须用0作左填充。

行的一次读写是原子操作 (不论一次读写多少列)。这个设计决策能够使用户很容易的理解程序在对同一个行进行并发更新操作时的行为。

2、列族 column family

hbase表中的每个列，都归属与某个列族。列族是表的chema的一部分(而列不是)，必须在使用表之前定义。列名都以列族作为前缀。例如courses:history，courses:math都属于courses这个列族。

访问控制、磁盘和内存的使用统计都是在列族层面进行的。实际应用中，列族上的控制权限能帮助我们管理不同类型的应用：我们允许一些应用可以添加新的基本数据、一些应用可以读取基本数据并创建继承的列族、一些应用则只允许浏览数据（甚至可能因为隐私的原因不能浏览所有数据）。

3、单元 Cell

HBase中通过row和columns确定的为一个存贮单元称为cell。由{row key, column( =<family> + <label>), version} 唯一确定的单元。cell中的数据是没有类型的，全部是字节码形式存贮。

4、时间戳 timestamp

每个cell都保存着同一份数据的多个版本。版本通过时间戳来索引。时间戳的类型是 64位整型。时间戳可以由hbase(在数据写入时自动 )赋值，此时时间戳是精确到毫秒的当前系统时间。时间戳也可以由客户显式赋值。如果应用程序要避免数据版本冲突，就必须自己生成具有唯一性的时间戳。每个cell中，不同版本的数据按照时间倒序排序，即最新的数据排在最前面。

为了避免数据存在过多版本造成的的管理 (包括存贮和索引)负担，hbase提供了两种数据版本回收方式。一是保存数据的最后n个版本，二是保存最近一段时间内的版本（比如最近七天）。用户可以针对每个列族进行设置。

Hbase shell

HBase Shell的一些基本操作命令，列出了几个常用的HBase Shell命令，如下：

名称命令表达式
查看存在哪些表list
创建表create '表名称', '列名称1','列名称2','列名称N'
添加记录put '表名称', '行名称', '列名称:', '值'
查看记录get '表名称', '行名称'
查看表中的记录总数count '表名称'
删除记录delete '表名' ,'行名称' , '列名称'
删除一张表先要屏蔽该表，才能对该表进行删除，第一步 disable '表名称' 第二步 drop '表名称'
查看所有记录scan "表名称"
查看某个表某个列中所有数据scan "表名称" , ['列名称:']
更新记录就是重写一遍进行覆

一般操作

1、HBase shell中的帮助命令非常强大，使用help获得全部命令的列表，使用help ‘command_name’获得某一个命令的详细信息。 例如：

help ‘list'

2、查询服务器状态

status

3、查询Hbase版本：

version

4、查看所有表

list

增删改

1、创建一个表

create 'member','member_id','address','info’

2、获得表的描述

describe 'member'

3、添加一个列族

alter 'member', 'id'

4、删除一个列族

alter 'member', {NAME => 'member_id', METHOD => 'delete’}

5、删除列

1）通过delete命令，我们可以删除id为某个值的‘info:age’字段，接下来的get就无视了

delete 'member','debugo','info:age'
get 'member','debugo','info:age'

2）删除整行的值：deleteall

deleteall 'member','debugo'
get 'member',’debugo'

6、通过enable和disable来启用/禁用这个表,相应的可以通过is_enabled和is_disabled来检查表是否被禁用。

is_enabled 'member'
is_disabled 'member'

7、使用exists来检查表是否存在

exists 'member'

8、删除表需要先将表disable。

disable 'member'
drop 'member'

9、put

在HBase shell中，我们可以通过put命令来插入数据。例如我们新创建一个表，它拥有id、address和info三个列簇，并插入一些数据。列簇下的列不需要提前创建，在需要时通过:来指定即可。

create 'member','id','address','info'
# 数据
put 'member', 'debugo','id','11'
put 'member', 'debugo','info:age','27'
put 'member', 'debugo','info:birthday','1987-04-04'
put 'member', 'debugo','info:industry', 'it'
put 'member', 'debugo','address:city','beijing'
put 'member', 'debugo','address:country','china'
put 'member', 'Sariel', 'id', '21'
put 'member', 'Sariel','info:age', '26'
put 'member', 'Sariel','info:birthday', '1988-05-09 '
put 'member', 'Sariel','info:industry', 'it'
put 'member', 'Sariel','address:city', 'beijing'
put 'member', 'Sariel','address:country', 'china'
put 'member', 'Elvis', 'id', '22'
put 'member', 'Elvis','info:age', '26'
put 'member', 'Elvis','info:birthday', '1988-09-14 '
put 'member', 'Elvis','info:industry', 'it'
put 'member', 'Elvis','address:city', 'beijing'
put 'member', 'Elvis','address:country', 'china'

查询

1、查询表中有多少行：count

count 'member'

2、get

1)获取一个id的所有数据

get 'member', ‘Sariel'

2)获得一个id，一个列簇（一个列）中的所有数据:

get 'member', 'Sariel', 'info'

3、查询整表数据

scan 'member'

4、扫描整个列簇

scan 'member', {COLUMN=>'info'}

5、指定扫描其中的某个列：

scan 'member', {COLUMNS=> 'info:birthday'}

6、除了列（COLUMNS）修饰词外，HBase还支持Limit（限制查询结果行数），STARTROW（ROWKEY起始行。会先根据这个key定位到region，再向后扫描）、STOPROW(结束行)、TIMERANGE（限定时间戳范围）、VERSIONS（版本数）、和FILTER（按条件过滤行）等。比如我们从Sariel这个rowkey开始，找下一个行的最新版本

scan 'member', { STARTROW => 'Sariel', LIMIT=>1, VERSIONS=>1}

7、Filter是一个非常强大的修饰词，可以设定一系列条件来进行过滤。比如我们要限制某个列的值等于26

scan 'member', FILTER=>"ValueFilter(=,'binary:26’)"

值包含6这个值：

scan 'member', FILTER=>"ValueFilter(=,'substring:6')"

列名中的前缀为birthday的

scan 'member', FILTER=>"ColumnPrefixFilter('birth') “

FILTER中支持多个过滤条件通过括号、AND和OR的条件组合

scan 'member', FILTER=>"ColumnPrefixFilter('birth') AND ValueFilter ValueFilter(=,'substring:1988')"

PrefixFilter是对Rowkey的前缀进行判断,这是一个非常常用的功能。

scan 'member', FILTER=>"PrefixFilter('E')"

参考：
hbase shell基础和常用命令详解
HBase Shell 常用操作

https://www.cnblogs.com/ityouknow/p/7344001.html

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/423289.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

【C++深度剖析教程13】函数对象的分析

【C++深度剖析教程13】函数对象的分析

今天来学习函数对象。什么是函数对象呢&#xff1f;下面我们以一个例子来引出函数对象的概念。 假设我们需要编写一个函数&#xff0c;实现下面这些功能&#xff1a; -函数可以获得斐波那契数列每一项的值 -每调用一次返回一个值 -函数可根据需要重复用使用 实现上面的几个…
阅读更多...
IE图标消失 HTML文件图标变为未知图标的解决方法

IE图标消失 HTML文件图标变为未知图标的解决方法

有时候保存在硬盘里的HTM和HTML文件图标会突然变为未知的图标&#xff0c;而且它们往往还是与IE关联&#xff0c;也没有发现病毒。原因我怎么也弄不明白&#xff0c;但可以通过对注册表做些修改来恢复&#xff0c;详细步骤如下: 1.首先打开注册表编辑器&#xff0c;定位到HKEY_…
阅读更多...
(SQuirreL SQL Client 客户端 )使用Apache Phoenix 实现 SQL 操作HBase

(SQuirreL SQL Client 客户端 )使用Apache Phoenix 实现 SQL 操作HBase

Apache Phoenix 相信大家并不陌生&#xff0c;它是HBase的SQL驱动&#xff0c;Phoenix 使得Hbase 支持通过JDBC的方式进行访问&#xff0c;并将你的SQL查询转换成Hbase的扫描和相应的动作。 兼容性&#xff1a; Phoenix 2.x - HBase 0.94.x Phoenix 3.x - HBase 0.94.x Phoen…
阅读更多...
【C++深度剖析教程14】经典问题解析三之关于赋值的疑问

【C++深度剖析教程14】经典问题解析三之关于赋值的疑问

今天我们来总结一下&#xff0c;之前所学C中所遇到的一些经典的问题。 第一个疑问是&#xff1a; -什么时候需要重载赋值操作符 -编译器是否提供默认的赋值操作&#xff1f; 解答&#xff1a; *编译器为每个类默认重载了赋值操作符 *默认的赋值操作符仅完成了浅拷贝 *当…
阅读更多...
前端学习（82）：按内容进行分类

前端学习（82）：按内容进行分类

阅读更多...
微服务架构和SOA的区别

微服务架构和SOA的区别

1. 2. 4 微服 务 架构 与 SOA 的 区别 1. 3. 1 微 服务 的 拆分 对于 一般 的 公司 而言&#xff0c; 实践 微 服务 有 非常 大的 技术 挑战&#xff0c; 所以 并不是 所有 的 公司 都 适合 将 单体 架构 拆分 成 微服 务 架构。 一般来说&#xff0c; 微服 务 架构 比较 适合 …
阅读更多...
【C++深度剖析教程15】经典问题解析之关于string的疑问

【C++深度剖析教程15】经典问题解析之关于string的疑问

今天来看一下在面试笔试中经常会出错的地方。 我们先来看一个代码&#xff1a; #include <iostream> #include <string>using namespace std;int main() {string s "12345";const char* p s.c_str();cout << p << endl; s.append(&qu…
阅读更多...
由于这台计算机没有终端服务器客户端访问许可证，远程会话被中断解决办法...

由于这台计算机没有终端服务器客户端访问许可证，远程会话被中断解决办法...

由于这台计算机没有终端服务器客户端访问许可证&#xff0c;远程会话被中断。 最近在远程连接到一台服务器突然出现这个错误&#xff0c;发现是服务器配置参数错误。安装的时候终端服务器授权模式为“每设备”&#xff0c;那么只要把终端服务器授权模式从“每设备”更改为“每用…
阅读更多...
前端学习（83）：按显示进行分类

前端学习（83）：按显示进行分类

替换元素有自己的特性&#xff0c;虽然属于inline&#xff0c;但是能改变大小
阅读更多...
【C++深度剖析教程16】智能指针的分析

【C++深度剖析教程16】智能指针的分析

今天我们来学习C中的一个独有的特性&#xff0c;智能指针。智能指针的作用非常的强大&#xff0c;它解决了C语言关于指针部分内存泄漏的BUG。那么在此处&#xff0c;内存泄漏指的是什么呢&#xff1f; -动态申请堆空间&#xff0c;用完后不归还 -C语言中没有垃圾回收机制 -指…
阅读更多...
【移植Linux 3.4.2内核第三步】从0制作支持新内核的文件系统

【移植Linux 3.4.2内核第三步】从0制作支持新内核的文件系统

学习交流加 个人qq&#xff1a; 1126137994个人微信&#xff1a; liu1126137994学习交流资源分享qq群&#xff1a; 962535112 上一篇文章&#xff0c;我们修改了内核代码改了系统的分区&#xff0c;但是最后启动&#xff0c;发现虽然我们可以挂载之前的文件系统&#xff0c;但是…
阅读更多...
回顾2009，展望2010

回顾2009，展望2010

今天1月2号&#xff0c;更确切的说&#xff0c;是2010年1月2号&#xff0c;刚吃完午饭&#xff0c;突然有一股想写博客的冲动&#xff0c;不为别的&#xff0c;只为祭奠我那逝去的2009&#xff0c;再也回不来的2009。也为了能让自己在2010年有所期盼&#xff0c;有所追求&#…
阅读更多...
javasript 操作option select

javasript 操作option select

javascript select option对象总结2009-09-28 08:59一、基础理解&#xff1a;var e document.getElementById("selectId");e.options new Option("文本", "值"); //创建一个option对象&#xff0c;即在<select>标签中创建一个或多个&…
阅读更多...
【移植Linux 3.4.2内核第二步】之修改系统分区

【移植Linux 3.4.2内核第二步】之修改系统分区

今天接着移植Linux 3.4.2内核&#xff0c;接着上一篇文章&#xff08;点击查看&#xff1a;上一篇文章&#xff09;我们完成了内核的串口启动打印输出&#xff0c;但是无法挂载根文件系统&#xff0c;我们看看启动后显示的是什么&#xff1a; 从打印结构可以看出&#xff0c…
阅读更多...
phoenix Explain Plan 翻译

phoenix Explain Plan 翻译

Explain Plan An EXPLAIN plan tells you a lot about how a query will be run: 一个执行计划会告诉你一个执行计划怎么执行 All the HBase range queries that will be executed 所有hbase 范围查询会被执行 An estimate of the number of bytes that will be scanned 评估多…
阅读更多...
【C++深度剖析教程17】逻辑操作符的陷阱

【C++深度剖析教程17】逻辑操作符的陷阱

今天我们来学习逻辑操作符&#xff0c;那么什么是逻辑操作符的陷阱呢&#xff1f;在讲解逻辑操作符陷阱之前&#xff0c;我们先来回顾什么是逻辑操作符&#xff1a; 逻辑运算符的原生语义&#xff1a; -操作数只有两种值&#xff08;true和false&#xff09; -逻辑表达式不用…
阅读更多...
前端学习（86）：标签嵌套规范

前端学习（86）：标签嵌套规范

阅读更多...
【移植Linux 3.4.2内核之四】修改内核代码支持YAFFS文件系统

【移植Linux 3.4.2内核之四】修改内核代码支持YAFFS文件系统

上一篇文章&#xff0c;我们从0制作jffs2文件系统&#xff0c;因为我们的内核本身就支持iffs2文件系统&#xff0c;但是它不支持yaffs文件系统。今天我们就来修改内核代码&#xff0c;让内核支持yaffs文件系统的格式。 1.首先我们获取yaffs源码 我是通过git获得&#xff0c;当…
阅读更多...
通过split命令分割大文件

通过split命令分割大文件

场景 1.线上出了问题&#xff0c;我需要去查找log来定位问题&#xff0c;但是由于线上数据量庞大&#xff0c;这些log文件每过一个小时就会自动回滚一次&#xff0c;尽管如此&#xff0c;有的log文件依然达到了五六g以上的大小。 对于这种巨大的log文件&#xff0c;常用的一些…
阅读更多...
一个简单的 Generic Factory 类

一个简单的 Generic Factory 类

简单的工厂类的一个使用场景是&#xff0c; 假设有一个基类 BaseClass&#xff0c; 和一系列的子类 A&#xff0c; B&#xff0c; C&#xff0c; 工厂类根据某个参数&#xff0c;例如字符串 “A”, “B”, “C” 创建出相应的子类。 举例如下&#xff1a; public class Factory…
阅读更多...
最新文章

Copyright @ 2022~2023