随笔分类 -  Hadoop

摘要:环境 win7+hadoop_1.2.1+eclipse 3.7+maven 3 1.在win7下下载hadoop_1.2.1 2.安装hadoop的eclipse插件,注意eclipse 4.x版本下,hadoop插件会有问题,一定不能用4.x版本的eclipse,我用的是eclipse Indi 阅读全文
posted @ 2016-02-26 11:20 502280728 阅读(403) 评论(0) 推荐(0)
摘要:自学hadoop真的很困难,主要是hadoop版本太混乱了,各个版本之间兼容性并不算太好。更主要的是网上的很多MapReduce的Java例子不写import!!!只写类名!!!偏偏Hadoop中有很多重名的类,不写Import根本不知道是哪个类!!!而且也不写上hadoop的版本号!!!让人根本看 阅读全文
posted @ 2016-02-26 08:36 502280728 阅读(353) 评论(0) 推荐(0)
摘要:本文为转载,原文地址是http://www.linuxidc.com/Linux/2015-03/115272.htm。删减了一些东西。 同时所需的 jdk,maven,protobuf都在 百度网盘 上 1.操作系统编译环境 yum install cmake lzo-devel zlib-dev 阅读全文
posted @ 2016-02-19 15:04 502280728
摘要:这里是hadoop最小的配置,也就是修改最少量的东西让hadoop跑起来。 系统是 Centos6.7 64位, hadoop是2.6.0,虚拟机是VMWare WorkStation 假设虚拟机启动了4台机子:192.168.0.80 、192.168.0.155、192.168.0.157、19 阅读全文
posted @ 2016-02-19 10:22 502280728 阅读(1206) 评论(0) 推荐(0)