摘要: Java学习之jvm gc算法阅读全文
posted @ 2017-03-12 16:44 神话小小哥 阅读(16) 评论(0)  编辑
摘要: Hive设置mysql元数据编码问题,需要设置成latin1阅读全文
posted @ 2017-02-12 22:54 神话小小哥 阅读(5) 评论(0)  编辑
摘要: Spark学习笔记1——Spark介绍,RDD算子Transformation和Action入门阅读全文
posted @ 2017-02-11 09:32 神话小小哥 阅读(31) 评论(0) 编辑
摘要: AKKA学习笔记——AKKA的介绍,关于Actor并发模型,以及AKKA实现的一个RPC例子阅读全文
posted @ 2017-02-10 20:03 神话小小哥 阅读(208) 评论(0) 编辑
摘要: azkaban学习笔记——azkaban任务调度过程的介绍、配置、job示例。阅读全文
posted @ 2017-01-14 20:56 神话小小哥 阅读(185) 评论(0) 编辑
摘要: Hive学习笔记总结系列2——HQL基础知识,各种join操作实战,以及实战-级联求和(累计报表)阅读全文
posted @ 2017-01-12 23:53 神话小小哥 阅读(122) 评论(0) 编辑
摘要: Hive学习笔记总结系列1——介绍Hive,以及其基本操作:创建、查看、插入,join操作阅读全文
posted @ 2017-01-11 23:05 神话小小哥 阅读(330) 评论(0) 编辑
摘要: Spark学习笔记3——cache缓存和checkpoint容错机制阅读全文
posted @ 2017-01-03 23:22 神话小小哥 阅读(5) 评论(0) 编辑
摘要: Spark学习笔记2——Spark RDD的依赖,DAG图,任务执行流程图阅读全文
posted @ 2016-12-25 15:42 神话小小哥 阅读(12) 评论(0) 编辑
摘要: Hadoop学习笔记总结系列5——获取分片信息介绍,以及为何Hadoop不适合处理小文件阅读全文
posted @ 2016-12-10 11:55 神话小小哥 阅读(93) 评论(0) 编辑
摘要: Hadoop学习笔记总结系列4——MapReduce任务调度过程,以及分区、排序、规约、分组过程的总结。阅读全文
posted @ 2016-12-07 23:46 神话小小哥 阅读(56) 评论(0) 编辑
摘要: 之前一直不清楚MapReduce阶段System.out打印到哪儿去了。现在知道了,任务分发了节点后,是无法再客户端窗口查看的。要想查看,需要打开默认关闭的JobHistoryServer进程。存放在每个节点的Hadoop安装目录/logs/userlogs/…在Web UI中也能查看。下面是转载的阅读全文
posted @ 2016-12-06 15:20 神话小小哥 阅读(9) 评论(0)  编辑
摘要: Hadoop学习笔记总结系列3——YARN框架介绍,任务详细调度分配流程。阅读全文
posted @ 2016-12-05 23:26 神话小小哥 阅读(90) 评论(0) 编辑
摘要: Hadoop学习笔记总结系列2——HDFS文件剖析文件读取和写入流程解析,源码分析;副本存放机制。阅读全文
posted @ 2016-12-04 20:55 神话小小哥 阅读(40) 评论(0) 编辑
摘要: Hadoop学习笔记总结系列1——HDFS架构以及HA阅读全文
posted @ 2016-10-02 11:13 神话小小哥 阅读(59) 评论(0) 编辑