2016年4月26日
Spark Streaming on Kafka解析和安装实战
摘要： 本课分2部分讲解： 第一部分，讲解Kafka的概念、架构和用例场景； 第二部分，讲解Kafka的安装和实战。 由于时间关系，今天的课程只讲到如何用官网的例子验证Kafka的安装是否成功。后续课程会接着讲解如何集成Spark Streaming和Kafka。 一、Kafka的概念、架构和用例场景 ht 阅读全文
posted @ 2016-04-26 00:22 VV一笑2016 阅读(2448) 评论(1) 推荐(0)
Flume推送数据到SparkStreaming案例实战和内幕源码解密
摘要： 本期内容： 1. Flume on HDFS案例回顾 2. Flume推送数据到Spark Streaming实战 3. 原理绘图剖析 1. Flume on HDFS案例回顾 上节课要求大家自己安装配置Flume，并且测试数据的传输。我昨天是要求传送的HDFS上。 文件配置： ~/.bashrc: 阅读全文
posted @ 2016-04-26 00:09 VV一笑2016 阅读(812) 评论(0) 推荐(0)