摘要： Table中Family和Qualifier的关系与区别 就像用MySQL一样，我们要做的是表设计，MySQL中的表，行，列的在HBase已经有所区别了，在HBase中主要是Table和Family和Qualifier，这三个概念。Table可以直接理解为表，而Family和Qualifier其实都 阅读全文

摘要： 配置内容 static{configuration = HBaseConfiguration.create(); //创建配置文件（也就是load工程包目录下的配置文件hbase-site.xml）String filePath = "hbase-site.xml";Path path = new 阅读全文

摘要： 总结下一直想写hbase的实践经验，在用hbase的过程中，我们都知道，rowkey设计的好坏，是我们能最大发挥hbase的架构优势，也是我们是否正确理解hbase的一个关键点。闲话少说，进入正题。hbase所谓的三维有序存储的三维是指：rowkey（行主键），column key(columnFa 阅读全文

摘要： Split机制：可以理解为HDFS上Block一分二的情况。每个Table一开始只有一个region，随着数据不断插入表，region不断增大，当增大到一个阀值的时候，Hregion就会等分会两个新的Hregion。当table中的行不断增多，就会有越来越多的Hregion。 非实时，定期触发。 H 阅读全文

摘要： Mapreduce自身的特点： 1、IO和网络负载大；优化策略：减少IO和网络负载。 2、内存负载不大。优化策略：增大内存使用率； 3、CPU负载不大。优化策略：增大CPU使用率； （hive的优化应当根据mapreduce的作业特点和自己的作业实际需求进行优化） 优化1、合并输入 淘宝一个大型项目 阅读全文

摘要： >从vmware workstation中克隆(clone)了一个redhat6.0的虚拟机，启动之后发现网卡没有启动。于是重启一下network服务，发现提示错误信息“Device eth0 does not seem to be present, delaying initialization. 阅读全文

摘要： Sqoop抽取从mysql抽取到hive sqoop抽取到mysql一样有两种方式一种是用command line的方式，一种是用sqoop opt文件调用的方式。（由于两种sqoop一已经记录了，现在主要是利用opt的方式） 一、从hive到mysql，如果hive对应表如果没有分区字段的话配置如 阅读全文

摘要： 这个错误引起主要是因为环境读取不到yun引起的可以考虑/etc/sysconfig/network-scripts/ifcfg-eth0 配置出错导致网络不通。或者/etc/resolv.conf的DNS配置出错。或者可以考虑清楚yum缓存影响（yum clean all） vi /etc/reso 阅读全文

摘要： >一.写在前面： 因为是我刚学习linux好多问题需要解决，bolg仅作为记录自己的在技术这条道路上的点点滴滴。 二.事件起因： 最近因为女友的原因消沉的好长时间，在马哥那里的课程的结束到现在已经将近45天时间都没有温习，今天拿出来突然老师问我会不会配置lvs，顿时傻眼了。忘记光了，看来这温故而知新 阅读全文

摘要： 二跳率：访客打开受访页面后点击1次页面中的任意链接记为1次二跳，点击2次，记为2次，以此类推。二跳率等于二跳次数除以页面浏览量。二跳率越高说明页面受关注的内容越多，效果越好。跳出率：访客打开受访页面后没有点击任何链接，直接关闭页面，记为1次跳出。跳出率等于跳出次数除以页面浏览量。跳出率越低，说明页面 阅读全文