• 博客园logo
  • 会员
  • 众包
  • 新闻
  • 博问
  • 闪存
  • 赞助商
  • HarmonyOS
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录
呢喃的歌声
博客园 | 首页 | 新随笔 | 新文章 | 联系 | 订阅 订阅 | 管理

2017年5月7日

hbase 利用rowkey设计进行多条件查询
摘要: 摘要 本文主要内容是通过合理Hbase 行键(rowkey)设计实现快速的多条件查询,所采用的方法将所有要用于查询中的列经过一些处理后存储在rowkey中,查询时通过rowkey进行查询,提高rowkey的利用率,加快查询速度。行键(rowkey)并不是简单的把所有要查询的列的值直接拼接起来,而是将 阅读全文
posted @ 2017-05-07 18:10 呢喃的歌声 阅读(763) 评论(0) 推荐(0)
 
sqoop import 和export的问题
摘要: sqoop import DB 2 hive(hdfs)是采用JDBC的过程,与传统hive区别在与多走了thrift server接口(稳定性待学习现在还比较模糊没做过大数据量测试),而export是通过hive cli 直接走了hive driver不存在稳定性问题。 阅读全文
posted @ 2017-05-07 16:59 呢喃的歌声 阅读(182) 评论(0) 推荐(0)
 
大数据性能调优之HBase的RowKey设计
摘要: Hbase是三维有序存储的,通过rowkey(行键),column key(column family和qualifier)和TimeStamp(时间戳)这个三个维度可以对HBase中的数据进行快速定位。 HBase中rowkey可以唯一标识一行记录,在HBase查询的时候,有以下几种方式: row 阅读全文
posted @ 2017-05-07 16:56 呢喃的歌声 阅读(6227) 评论(0) 推荐(0)
 
hbase的查询scan功能注意点(setStartRow, setStopRow)
摘要: hbase的scan查询功能注意项: Scan scan = new Scan(); scan.setStartRow(“5193:”); scan.setStopRow(“5194:”); ResultScanner result = table.getScanner(scan); for (Re 阅读全文
posted @ 2017-05-07 16:09 呢喃的歌声 阅读(445) 评论(0) 推荐(0)
 
 

公告


博客园  ©  2004-2025
浙公网安备 33010602011771号 浙ICP备2021040463号-3