12 2019 档案

Hbase万亿级存储性能优化总结-配置
摘要：背景 hbase主集群在生产环境已稳定运行有1年半时间，最大的单表region数已达7200多个，每天新增入库量就有百亿条，对hbase的认识经历了懵懂到熟的过程。为了应对业务数据的压力，hbase入库也由最初的单机多线程升级为有容灾机制的分布式入库，为及早发现集群中的问题，还开发了一套对hbase 阅读全文
posted @ 2019-12-30 17:13 leon0 阅读(599) 评论(0) 推荐(0)
hbase 读写和优化
摘要：转自： https://blog.csdn.net/wuxintdrh/article/details/69056188 阅读全文
posted @ 2019-12-30 14:41 leon0 阅读(139) 评论(0) 推荐(0)
hive数据倾斜定位及处理
摘要：转自 ： https://blog.csdn.net/u012151684/article/details/77074356 阅读全文
posted @ 2019-12-25 17:10 leon0 阅读(667) 评论(0) 推荐(0)
flink初识及安装flink standalone集群
摘要：转自：https://www.cnblogs.com/dtmobile-ksw/p/11988132.html 安装Flink standalone集群 1.下载flink https://flink.apache.org/downloads.html 2.官网参考 https://ci.apach 阅读全文
posted @ 2019-12-24 11:18 leon0 阅读(1487) 评论(0) 推荐(0)
【Linux】用less查看日志文件
摘要：转自： https://www.cnblogs.com/nick-huang/p/4800709.html#my_inner_label2 一般程序部署在Linux环境，查看日志时，一般用less满足大部分的需求。 列举、记录最常用的场景，代码以Tomcat日志文件catalna.out为例。 1. 阅读全文
posted @ 2019-12-19 17:09 leon0 阅读(731) 评论(0) 推荐(0)
sqoop的详细使用及原理
摘要：转自：https://blog.csdn.net/zhusiqing6/article/details/95680185 1、sqoop简介sqoop是一个用来将hadoop中hdfs和关系型数据库中的数据相互迁移的工具，可以将一个关系型数据库（mysql、oracle等）中的数据导入到hadoop 阅读全文
posted @ 2019-12-19 11:44 leon0 阅读(1670) 评论(0) 推荐(0)
HBase删除数据的原理
摘要：转自：https://blog.csdn.net/cenjianteng/article/details/96645447 HBase 的删除操作并不会立即将数据从磁盘上删除，删除操作主要是对要被删除的数据打上标记。 当执行删除操作时，HBase 新插入一条相同的 KeyValue 数据，但是使 k 阅读全文
posted @ 2019-12-18 15:57 leon0 阅读(1595) 评论(0) 推荐(0)