摘要:
cloudera oozie默认时区是UTC,在开发oozie任务时必须在期望执行的时间上减去8小时,很不习惯。记录下修改时区的配置操作。 1. cloudera oozie配置—>Oozie Server Default Group -->高级-->oozie-site.xml 的 Oozie S 阅读全文
摘要:
cloudera oozie默认时区是UTC,在开发oozie任务时必须在期望执行的时间上减去8小时,很不习惯。记录下修改时区的配置操作。 1. cloudera oozie配置—>Oozie Server Default Group -->高级-->oozie-site.xml 的 Oozie S 阅读全文
摘要:
假设workflow里有两个action节点,shell和hive,hive需要用到shell节点里的值,shell脚本如下 hive节点需传入day这个参数。需要用到shell节点里<capture-output/>这个属性,如下 阅读全文
摘要:
在分区表里增加字段后,向分区表插入数据有两种情况: 1.分区在修改表结构前存在 2.分区在修改表结构前不存在 对于第二种情况,bug不存在 针对第一种情形, 执行alter table denglg add columns(c3 string); 查分区数据新增字段值为空, 需再执行alter ta 阅读全文
摘要:
向hive表对应hdfs中新建目录,put数据后,在hive命令行查询,查不到put进分区的数据,下面记录处理方法:分区既然是HDFS目录,那就可以通过hdfsput命令直接向HDFS添加分区。然而,元存储拥有所有表的元数据,它不会自动识别这些直接被添加到HDFS的分区。Hive提供了命令MSCKR... 阅读全文
|