摘要：package regionForKeywords; import java.io.*; /** * Created by huangjiahong on 2016/2/25. */ public class RegionKeywordExcelTransform { public static v 阅读全文

摘要：flume：从数据源拉取数据 kafka：主要起到缓冲从flume拉取多了的数据 sparkStream：对数据进行处理 一.flume拉取数据 1.源数据文件读取配置 在flume目录的conf目录下配置读取数据源的配置，配置一个test.properties文件，内容如下: a1.sources 阅读全文

摘要：环境: linux spark1.6.0 hadoop2.2.0 一.安装scala(每台机器) 1.下载scala-2.11.0.tgz 放在目录: /opt下,tar -zxvf scala-2.11.0.tgz 2.在hadoop用户下 vim /etc/profile 3.在profile文 阅读全文

摘要：一.安装storm 下载storm http://storm.apache.org/downloads.html export STORM_HOME=/Users/huangjiahong/Documents/apache/apache-storm-0.10.0 二.安装zookeeper 下载zo 阅读全文