02 2016 档案

hadoop hdfs 权限修改
摘要：hdfs的根目录属于hdfs用户，在supergroup组下； 因此在根目录新增data目录需要切换到hdfs用户下，在hdfs用户下执行新增命令； 然后修改data目录所属用户和所属组，修改权限命令如下 ps：cdh默认的hdfs用户无密码，直接 ，转入即可。 http://www.linuxid 阅读全文
posted @ 2016-02-27 22:17 逸新 阅读(9630) 评论(0) 推荐(0)
cdh Host Monitor 启动失败
摘要：Host Monitor 提示/var/lib/cloudera host monitor/ts读写失败。 /var/lib/cloudera host monitor目录是Host Monitor服务动态生成的， 将/var/lib/cloudera host monitor删除，重启服务即可 阅读全文
posted @ 2016-02-27 17:15 逸新 阅读(4677) 评论(0) 推荐(0)
cdh yarn 启动失败
摘要：启动错误信息如下 问题应该是，虚拟断电造成的问题见错误。 CURRENT 文件在/var/lib/hadoop yarn/yarn nm recovery/yarn nm state目录序下， 这个文件是自动生成，将CURRENT 文件删除后，重启yarn服务即可。 阅读全文
posted @ 2016-02-27 17:12 逸新 阅读(3160) 评论(1) 推荐(0)
hive 存储
摘要：1、hive普通表 hive普通表将数据存储在hive.metastore.warehouse.dir设置的目录中，如果导入本地文件数据，数据会从本地导入到hdfs的目录中。 如果删除表，则将表和数据都删除掉 2、hive外部表 hive外部表则是使用hdfs其他目录的数据来创建，创建表时需要添加E 阅读全文
posted @ 2016-02-23 11:09 逸新 阅读(241) 评论(0) 推荐(0)
docker修改默认存储位置
摘要：docker 默认是将数据存储在/var/lib/docker下，因此当机器保存的镜像比较多，或者运行的镜像比较多时，会将系统存储占满（系统存储一般都只会分配很小的空间，仅保证系统运行），因此我们需要将docker的数据转移到数据磁盘上。 1、停止docker服务 2、将/var/lib/docke 阅读全文
posted @ 2016-02-17 11:03 逸新 阅读(455) 评论(0) 推荐(0)
centos新增磁盘
摘要：centos添加磁盘 原文： http://yingchao.iteye.com/blog/628097 先查看当前磁盘情况，使用fdisk l，查看当前有几块磁盘，磁盘分区是什么样子的，新的磁盘是空白的没有分区信息，在对照磁盘大小，找到新添加的磁盘 进入fdisk模式 fdisk <新添加的磁盘 阅读全文
posted @ 2016-02-16 16:30 逸新 阅读(221) 评论(0) 推荐(0)