打赏
摘要: 最近,需要这个知识点,看到网上各种繁多复杂的资料,自己梳理个思路。 不多说,直接上干货! 简述:将L列、M列和N列,相加放到O列。(当然这里是相邻的列)。同时,也可以求相隔几列的某些列相加。 阅读全文
posted @ 2017-01-18 23:59 大数据和AI躺过的坑 阅读(1132) 评论(0) 推荐(0)
摘要: Azkaban是什么?(一) Azkaban的功能特点(二) Azkaban的架构(三) Hadoop工作流引擎之Azkaban与Oozie对比(四) 不多说,直接上干货! http://www.cnblogs.com/zlslch/category/938837.html 准备这四个 Azkaba 阅读全文
posted @ 2017-01-18 12:07 大数据和AI躺过的坑 阅读(5297) 评论(0) 推荐(0)
摘要: Azkaban是什么?(一) Azkaban的功能特点(二) Azkaban的架构(三) 不多说,直接上干货! http://www.cnblogs.com/zlslch/category/938837.html 目前,市面上最流行的两种Hadoop工作流引擎调度器Azkaban与Oozie。 具体 阅读全文
posted @ 2017-01-18 12:03 大数据和AI躺过的坑 阅读(17099) 评论(0) 推荐(1)
摘要: Azkaban是什么?(一) Azkaban的功能特点(二) 不多说,直接上干货! http://www.cnblogs.com/zlslch/category/938837.html Azkaban的架构 Azkaban是一种类似于Oozie的工作流控制引擎,可以用来解决多个Hadoop(或Spa 阅读全文
posted @ 2017-01-18 11:49 大数据和AI躺过的坑 阅读(3066) 评论(0) 推荐(1)
摘要: Azkaban是什么?(一) 不多说,直接上干货! http://www.cnblogs.com/zlslch/category/938837.html Azkaban的功能特点 它具有如下功能特点: 1、Web用户界面 2、方便上传工作流 3、方便设置任务之间的关系 4、工作流调度 5、认证/授权 阅读全文
posted @ 2017-01-18 11:21 大数据和AI躺过的坑 阅读(3012) 评论(0) 推荐(0)
摘要: 不多说,直接上干货! 为此,需要第三方框架。如Azkaban或Oozie! Azkaban https://azkaban.github.io/ 具体,见我的博客,Azkaban概念学习系列。http://www.cnblogs.com/zlslch/category/938837.html Azk 阅读全文
posted @ 2017-01-18 11:04 大数据和AI躺过的坑 阅读(397) 评论(0) 推荐(0)
摘要: 不多说,直接上干货! 这只是部分,做个引子。 未完,待续! 阅读全文
posted @ 2017-01-18 10:30 大数据和AI躺过的坑 阅读(420) 评论(0) 推荐(0)
摘要: 不多说,直接上干货! Hadoop的ChainMapper和ChainReducer使用案例(链式处理) 什么是ChainMapper/ChainReducer? 阅读全文
posted @ 2017-01-18 10:14 大数据和AI躺过的坑 阅读(343) 评论(0) 推荐(0)
摘要: 工作流(Workflow),指“业务过程的部分或整体在计算机应用环境下的自动化”。是对工作流程及其各操作步骤之间业务规则的抽象、概括描述。在计算机中,工作流属于计算机支持的协同工作(CSCW)的一部分。后者是普遍地研究一个群体如何在计算机的帮助下实现协同工作的。 什么是工作流--JBPM? 推荐一篇 阅读全文
posted @ 2017-01-18 10:08 大数据和AI躺过的坑 阅读(1300) 评论(0) 推荐(0)
摘要: 不多说,这里,直接上干货!从这篇博客起,逐步分享如下: 1、工作流 2、Hadoop工作流(内置) 3、第三方框架--Azkaban(推荐外安装) 阅读全文
posted @ 2017-01-18 09:19 大数据和AI躺过的坑 阅读(458) 评论(0) 推荐(0)
摘要: 不多说,直接上干货! Hadoop的MR作业支持链式处理,类似在一个生产牛奶的流水线上,每一个阶段都有特定的任务要处理,比如提供牛奶盒,装入牛奶,封盒,打印出厂日期,等等,通过这样进一步的分工,从而提高了生产效率,那么在我们的Hadoop的MapReduce中也是如此,支持链式的处理方式,这些Map 阅读全文
posted @ 2017-01-18 08:59 大数据和AI躺过的坑 阅读(1012) 评论(0) 推荐(0)