2017年4月28日

Windows下搭建Spark+Hadoop开发环境
摘要： 只需要确保您的电脑已装好Java环境，那么就可以开始了。 一. 准备工作 1. 下载Hadoop2.7.1版本（写Spark和Hadoop主要是用到了Yarn，因此Hadoop必须安装） 下载地址：http://apache.fayea.com/hadoop/common/hadoop-2.7.1/ 阅读全文
posted @ 2017-04-28 22:44 ilinux_one 阅读(337) 评论(0) 推荐(0)
Spark Streaming
摘要： 对于从Kafka、Flume以及Kinesis这类数据源提取数据的流式应用来说，还需要额外增加相应的依赖项，下表列出了各种数据源对应的额外依赖项： 阅读全文
posted @ 2017-04-28 22:04 ilinux_one 阅读(189) 评论(0) 推荐(0)

导航