HBase - 随笔分类 - yuerspring

摘要：package cmcc.hbase.dao.impl;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.Cell... 阅读全文

posted @ 2016-12-05 22:39 yuerspring 阅读(131) 评论(0) 推荐(0)

摘要：http://www.cnblogs.com/nexiyi/p/hbase_shell.htmlhttp://blog.csdn.net/scutshuxue/article/details/6988348http://www.cnblogs.com/heyCodin... 阅读全文

posted @ 2016-12-05 22:18 yuerspring 阅读(157) 评论(0) 推荐(0)

大数据面试题

摘要：1.列举spark 比hadoop 快的原因，以及现在存在的主要问题2.描述下使用spark streaming 和 GraphX实现实时计算的可行性，以及可能会遇到的问题3.GraphX的Pregel API 只支持有向图遍历，如何实现无xiang 遍历，描... 阅读全文

posted @ 2016-10-15 13:37 yuerspring 阅读(136) 评论(0) 推荐(0)

大数据Hbase 面试题

摘要：hbase 的特点是什么 (1) Hbase一个分布式的基于列式存储的数据库,基于Hadoop的hdfs存储，zookeeper进行管理。(2) Hbase适合存储半结构化或非结构化数据，对于数据结构字段不够确定或者杂乱无章很难按一个概念去抽取的数据。(3) Hba... 阅读全文

posted @ 2016-10-14 22:33 yuerspring 阅读(292) 评论(0) 推荐(0)

摘要：java 插入数据到mysql 通过sqoop 导入到hive 中，kylin模拟见cube 时间和数据膨胀率 kylin 数据插入到 HBaseKylinHBase 1.1.3Hive 1.2.1Hadoop 2.5.1create table infoageti... 阅读全文

posted @ 2016-09-09 20:33 yuerspring 阅读(336) 评论(0) 推荐(0)

摘要：一、调优的目的充分的利用机器的性能，更快的完成mr程序的计算任务。甚至是在有限的机器条件下，能够支持运行足够多的mr程序。二、调优的总体概述从mr程序的内部运行机制，我们可以了解到一个mr程序由mapper和reducer两个阶段组成，其中mapper... 阅读全文

posted @ 2016-07-03 17:07 yuerspring 阅读(251) 评论(0) 推荐(0)

yuerspring