随笔分类 -  hadoop

摘要:该博文转自康哥的博客:kangfoo.github.io/article/2013/12/xu-ni-ji-an-zhuang-hadoop-wan-quan-fen-bu-shi/因为自己在参考博文进行集群部署的时候出现了很多误解,导致浪费了不少时间,因此想转过来并进行修改和注释,希望能减少一些不... 阅读全文
posted @ 2014-06-10 18:25 middlesummer 阅读(574) 评论(0) 推荐(0)
摘要:参考博客:http://my.oschina.net/winHerson/blog/121963eclipse远程调试:http://zhangjie.me/eclipse-debug-hadoop/百度文档:http://wenku.baidu.com/link?url=13x1F92KXZt4Q... 阅读全文
posted @ 2014-06-06 10:14 middlesummer 阅读(342) 评论(0) 推荐(0)
摘要:Java接口:1.URL接口读取数据2.FIleSystem API读取数据:public static FileSystem get(configuration conf) throws IOException;public static FileSystem get(URI uri, Confi... 阅读全文
posted @ 2014-05-12 14:59 middlesummer 阅读(113) 评论(0) 推荐(0)
摘要:本文以康哥的博客为基础进行修改和补充,详见:http://kangfoo.github.io/article/2014/01/hadoop1.x-wordcount-fen-xi/hadoop mapreduce 过程粗略的分为两个阶段: 1.map; 2.redurce(copy, sor... 阅读全文
posted @ 2014-05-01 19:21 middlesummer 阅读(266) 评论(0) 推荐(0)
摘要:连接:http://blog.csdn.net/vincent_czz/article/details/7900739 阅读全文
posted @ 2014-04-07 19:24 middlesummer 阅读(178) 评论(0) 推荐(0)