客户端API管理功能简介

客户端API可以管理HBase的集群、 表、 列族等元数据。大多数管理功能通过Admin来实现,标签除外。

1.列族管理 HColumnDescriptor

列族常见的属性管理:

  • 数据生存时间:通过设置数据生存时间(TimeToLive, 缩写为TTL) , HBase可以自动帮你清空超过生存时间的过期数据。
  • 版本数:设置列族存储的最大和最小版本数(Versions), 当某个单元格的数据存储达到了最大版本数的数据的时候, 再插入新数据会将旧数据删除。
  • 布隆过滤器:可以知道元素在HFile中是否“ 不存在” 或者“ 可能存在”
  • 块缓存:使用内存来记录数据, 适用于提升读取性能。
  • 大字段(BOM):当文件大于100KB小于10MB, 即可以被视为MOB。 HBase存储MOB字段的时候其实也是把该文件直接存储到HDFS上, 而在表中只存储了该文件的链接。

2.表管理HTableDescriptor

  • 最大文件尺寸(maxFileSize):设置该表的Region的最大尺寸。 如果有Region的大小超过了定义值, 则会触发Region拆分
  • 只读模式
  • Memstore刷写值:设置Memstore刷写值( memStoreFlushSize) 的最大值, 当Memstore存储的数据大于该值就会触发刷写( flush)

3.Region管理

获取服务器信息和region信息

Collection<ServerName> serverNames= admin.getClusterStatus().getServers();
        Iterator<ServerName> it=serverNames.iterator();
        while(it.hasNext()) {
            ServerName serverName=it.next();
            System.out.println("\nServer="+serverName.getServerName()+"拥有以下region:");
            
            List<HRegionInfo> regions =admin.getOnlineRegions(serverName);
            for(HRegionInfo region:regions) {
                System.out.println(region.getRegionNameAsString());
            }

4.快照管理

快照就是表在某个时刻的结构和数据。 可以使用快照来将某个表快速恢复到某个时刻的结构和数据。
原理:快照并不实际地复制数据, 而是保存一份文件列表, 通过修改表所链接的文件来改变表的数据。
恢复快照操作包括:停用表-》恢复快照-》启用表,例如:

admin.disableTable(TableName.valueOf("mytable"));
admin.restoreSnapshot("test_snapshot_1");
admin.enableTable(TableName.valueOf("mytable"));

5.维护工具管理

Admin提供了针对常见的HBase维护工具的调用方法,主要介绍:

  • 均衡器:HBase提供了一个均衡器用于自动均衡各个RegionServer之间的压力
  • 规整器:用于规整Region的尺寸,自动调整Region的尺寸。
  • 目录管理器:所谓的目录指的就是hbase:meta表中存储的Region信息。 当HBase在拆分( Split) 或者合并( merge) 的时候, 使用目录管理器( catalog janitor) 来清理这些原来的Region信息

6.可见性标签管理

介绍一个不由Admin接口提供的管理功能。通过给数据加上可见性标签可以实现简单的用户,用户组的权限控制。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 158,117评论 4 360
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 66,963评论 1 290
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 107,897评论 0 240
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,805评论 0 203
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,208评论 3 286
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,535评论 1 216
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,797评论 2 311
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,493评论 0 197
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,215评论 1 241
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,477评论 2 244
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 31,988评论 1 258
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,325评论 2 252
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 32,971评论 3 235
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,055评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,807评论 0 194
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,544评论 2 271
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,455评论 2 266

推荐阅读更多精彩内容

  • 本文首先简单介绍了HBase,然后重点讲述了HBase的高并发和实时处理数据 、HBase数据模型、HBase物理...
    达微阅读 2,680评论 1 13
  • 比特科技: 存储、数据库、大数据技术 » HBase原理和设计 http://www.bitstech.net/...
    葡萄喃喃呓语阅读 713评论 0 11
  • 参考:https://www.jianshu.com/p/569106a3008f 最近在逐步跟进Hbase的相关...
    博弈史密斯阅读 826评论 1 1
  • 简介 HBase —— Hadoop Database的简称,Google BigTable的另一种开源实现方式,...
    尼小摩阅读 513评论 0 3
  • 简介 HBase —— Hadoop Database的简称,Google BigTable的另一种开源实现方式,...
    编码前线阅读 267评论 0 0