随笔分类 -  hadoop

摘要:http://www.jianshu.com/p/5359f9ebfb18这篇博客总结了很多问题,有几个是我亲身遇到的,1、FATAL org.apache.hadoop.hdfs.server.datanode.DataNode: Exception in secureMain:检查hostnam... 阅读全文
posted @ 2017-06-15 18:46 yeemi 阅读(138) 评论(0) 推荐(0)
摘要:原文:http://www.cnblogs.com/tgzhu/p/5790565.html 在配置hbase集群将 hdfs 挂接到其它镜像盘时,有不少困惑的地方,结合以前的资料再次学习; 大数据底层技术的三大基石起源于Google在2006年之前的三篇论文GFS、Map-Reduc... 阅读全文
posted @ 2017-06-09 14:09 yeemi 阅读(166) 评论(0) 推荐(0)
摘要:hadoop监控指标的采集:通过jmx,获取数据。http://blog.csdn.net/u012948976/article/details/52270132深入了解How to monitor Hadoop metrics - Datadog和How to collect Hadoop met... 阅读全文
posted @ 2017-06-05 16:29 yeemi 阅读(1106) 评论(0) 推荐(0)
摘要:1.hive是什么?2.MapReduce框架实现SQL基本操作的原理是什么?3.Hive怎样实现SQL的词法和语法解析?连接:http://www.aboutyun.com/thread-20461-1-1.html 美团大众点评上:http://tech.meituan.c... 阅读全文
posted @ 2017-04-28 11:33 yeemi 阅读(294) 评论(0) 推荐(0)
摘要:在网上搜了一篇博客,然后按照上面的步骤进行操作,http://blog.csdn.net/linlinv3/article/details/49358217 遇到的问题: 1、java版本:一定要jdk7,不能是jdk8,否则报错.提示java版本有问题。 2、安装protoc , ... 阅读全文
posted @ 2017-04-11 20:24 yeemi 阅读(265) 评论(0) 推荐(0)
摘要:http://www.cnblogs.com/peizhe123/p/5540845.html在网上查资料时看到的,在配置hadoop时参数很多,但不知道具体有什么用。看到这个果断收藏。Hadoop参数汇总linux参数JVM参数Hadoop参数大全core-default.xmlhdfs-defa... 阅读全文
posted @ 2016-08-25 22:57 yeemi 阅读(167) 评论(0) 推荐(0)