见贤思小齐,知足常乐呵

  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

07 2018 档案

摘要:1. 查看各库的存储大小 hdfs dfs -du -h /user/hive/warehouse 2. 删除HDFS 文件 hdfs dfs -rmr 绝对路径名 例如:hdfs dfs -rmr /user/hive/warehouse/xhx_dw.db/dw_homework_questio 阅读全文
posted @ 2018-07-19 11:55 Suckseedeva 阅读(939) 评论(0) 推荐(0)

摘要:1 MySQL 到 Hive 表的sqoop任务把 原本的NULL 变成字符串 ‘null’ 了 alter table ${table_name} SET SERDEPROPERTIES('serialization.null.format' = '\\N'); -- 修改表的NULL值属性 sq 阅读全文
posted @ 2018-07-10 10:32 Suckseedeva 阅读(4226) 评论(0) 推荐(0)

摘要:1. 集群任务队列: 一般有 root.default, root.online, root.offline, root.spark-thiftserver Hue提交的任务一般默认在 default队列 如果是紧急任务,可以提交到其他队列,会快很多 方法: 指定队列 set mapreduce.j 阅读全文
posted @ 2018-07-10 10:27 Suckseedeva 阅读(474) 评论(0) 推荐(0)