摘要: 1、Oozie英文翻译 驯象人 2、Oozie简介 一个基于工作流引擎的开源框架,由Cloudera公司贡献给Apache,提供对Hadoop Mapreduce、Pig Jobs的任务调度与协调。 Oozie需要部署到Java Servlet容器中运行。 3、Oozie在集群中扮演的角色 定时调度 阅读全文
posted @ 2018-12-29 21:36 JokerQ- 阅读(5888) 评论(0) 推荐(0) 编辑
摘要: 1、Flume在集群中扮演的角色 Flume、Kafka用来实时进行数据收集,Spark、Storm用来实时处理数据,impala用来实时查询。 2、Flume框架简介 1.1 Flume提供一个分布式的,可靠的,对大数据量的日志进行高效收集、聚集、移动的服务,Flume只能在Unix环境下运行。 阅读全文
posted @ 2018-12-29 13:08 JokerQ- 阅读(997) 评论(0) 推荐(0) 编辑