摘要:        
azkaban的工作流中的参数可以分为如下几个类型:azkaban UI 页面输入参数, 环境变量参数, job作业文件中定义的参数,工作流的用户定义的属性文件,上游作业传递给下游的参数,工作流运行时产生的系统参数,job的common参数等。 参数的作业范围分类,对当前job有效局部有效,对整个工    阅读全文
posted @ 2018-11-14 20:28
硅谷工具人
阅读(4921)
评论(2)
推荐(0)
        
            
        
        
摘要:        
flume到hdfsSink: type hdfs path 写入hdfs的路径,需要包含文件系统标识,比如:hdfs://namenode/flume/webdata/ 可以使用flume提供的日期及%{host}表达式。 filePrefix 默认值:FlumeData 写入hdfs的文件名前缀    阅读全文
posted @ 2018-11-14 09:26
硅谷工具人
阅读(2430)
评论(0)
推荐(0)
        

 
         浙公网安备 33010602011771号
浙公网安备 33010602011771号