• 博客园logo
  • 会员
  • 众包
  • 新闻
  • 博问
  • 闪存
  • 赞助商
  • HarmonyOS
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录
呢喃的歌声
博客园 | 首页 | 新随笔 | 新文章 | 联系 | 订阅 订阅 | 管理

2017年4月27日

FamilyFilter(4)
摘要: 3.1. 基于列族过滤数据的FamilyFilter 构造函数: FamilyFilter(CompareFilter.CompareOp familyCompareOp, ByteArrayComparable familyComparator) 个人实测代码: HTable table = HB 阅读全文
posted @ 2017-04-27 22:59 呢喃的歌声 阅读(296) 评论(0) 推荐(0)
 
RandomRowFilter(3)
摘要: 比较容易理解 用来随机抽取 RandomRowFilter:从名字上就可以看出其大概的用法,本过滤器的作用就是按照一定的几率(<=0会过滤掉所有的行,>=1会包含所有的行)来返回随机的结果集,对于同样的数据集,多次使用同一个RandomRowFilter会返回不通的结果集,对于需要随机抽取一部分数据 阅读全文
posted @ 2017-04-27 22:25 呢喃的歌声 阅读(400) 评论(0) 推荐(0)
 
KeyOnlyFilter(2)
摘要: 主要用来过滤剩下行键计数一类 KeyOnlyFilter 官方API解释如下: A filter that will only return the key component of each KV (the value will be rewritten as empty). This filte 阅读全文
posted @ 2017-04-27 22:23 呢喃的歌声 阅读(342) 评论(0) 推荐(0)
 
hbase过滤器(1)
摘要: 最近在公司做hbase就打算复习下它的过滤器以便不时之需,RowFilter根据行键(rowkey)筛选数据 public void filter() throws IOException { Filter rf = new RowFilter(CompareFilter.CompareOp.LES 阅读全文
posted @ 2017-04-27 22:13 呢喃的歌声 阅读(141) 评论(0) 推荐(0)
 
公司jar包提交到集群的方法
摘要: yarn -jar xx.jar 此时包会提交到集群上运行 也可以把jar包放到hbase 的lib下面用hbase jar 方式调用 阅读全文
posted @ 2017-04-27 21:01 呢喃的歌声 阅读(195) 评论(0) 推荐(0)
 
hbase Hfile处理原因
摘要: Hile 内部的数据是按key排序好的,但Hfile之间数据并不能保证key的排序,也就是说对于新生成的Hfile,其内部的key并不都比老的Hfile的大,因此每次检索时,都需要在所有的Hfile中检索一次,再将记过合并。虽然Hbase针对HFile这个设计了各种加速机制如BloomFilter, 阅读全文
posted @ 2017-04-27 21:00 呢喃的歌声 阅读(216) 评论(0) 推荐(0)
 
 

公告


博客园  ©  2004-2025
浙公网安备 33010602011771号 浙ICP备2021040463号-3