米兰的小铁將

摘要： 一、hadoop调度框架Linux Crontab Azkaban https://azkaban.github.io/Oozie http://oozie.apache.org/Zeus(阿里的) https://github.com/michael8335/zeus2二、oozie架构1、oozie一个基于工作流引擎的开源框架，是... 阅读全文

摘要： 一、数据仓库架构二、flume收集数据存储到hdfs文档：http://flume.apache.org/releases/content/1.9.0/FlumeUserGuide.html#hdfs-sink三、监控日志目录日志数据，实时抽取之hdfs系统上-实验1、Source：Spooling Directory 在使用exec来监听数据源虽然实时性较高，但是可靠性较差，当source程序运... 阅读全文