随笔分类 - Hadoop

Mac搭建Hadoop源码阅读环境

摘要：1、本次Hadoop源码阅读环境使用的阅读工具是idea，Hadoop版本是2.7.3。需要安装的工具包括idea、jdk、maven、protobuf等 2、jdk，使用的版本是1.8版，在jdk官网下载jdk-8u111-macosx-x64.dmg，点击安装，一路next。 3、idea安装，阅读全文

posted @ 2017-01-15 15:22 骁枫阅读(3200) 评论(0) 推荐(0)

Flume 远程写HDFS

摘要：现在的需求是在一台Flume采集机器上，往Hadoop集群上写HDFS，该机器没有安装Hadoop。这里的Flume版本是1.6.0，Hadoop版本是2.7.1. 把Hadoop集群的hdfs-site.xml、core-site.xml两个配置文件复制到 flume安装目录的conf目录去，把阅读全文

posted @ 2016-09-19 16:30 骁枫阅读(5209) 评论(0) 推荐(0)