随笔分类 -  大数据仓库

摘要:hdfs的根目录属于hdfs用户,在supergroup组下; 因此在根目录新增data目录需要切换到hdfs用户下,在hdfs用户下执行新增命令; 然后修改data目录所属用户和所属组,修改权限命令如下 ps:cdh默认的hdfs用户无密码,直接 ,转入即可。 http://www.linuxid 阅读全文
posted @ 2016-02-27 22:17 逸新 阅读(9623) 评论(0) 推荐(0)
摘要:Host Monitor 提示/var/lib/cloudera host monitor/ts读写失败。 /var/lib/cloudera host monitor目录是Host Monitor服务动态生成的, 将/var/lib/cloudera host monitor删除,重启服务即可 阅读全文
posted @ 2016-02-27 17:15 逸新 阅读(4674) 评论(0) 推荐(0)
摘要:启动错误信息如下 问题应该是,虚拟断电造成的问题见错误。 CURRENT 文件在/var/lib/hadoop yarn/yarn nm recovery/yarn nm state目录序下, 这个文件是自动生成,将CURRENT 文件删除后,重启yarn服务即可。 阅读全文
posted @ 2016-02-27 17:12 逸新 阅读(3156) 评论(1) 推荐(0)
摘要:1、hive普通表 hive普通表将数据存储在hive.metastore.warehouse.dir设置的目录中,如果导入本地文件数据,数据会从本地导入到hdfs的目录中。 如果删除表,则将表和数据都删除掉 2、hive外部表 hive外部表则是使用hdfs其他目录的数据来创建,创建表时需要添加E 阅读全文
posted @ 2016-02-23 11:09 逸新 阅读(240) 评论(0) 推荐(0)
摘要:docker hadoop + docker入门实践 + docker安装hadoop + 入门:http://udn.yyuap.com/doc/docker_practice/image/save_load.html docker 网络 pipework + Pipewo... 阅读全文
posted @ 2016-01-09 00:19 逸新 阅读(806) 评论(0) 推荐(0)