随笔分类 -  CDH集群部署

摘要:大数据集群安装部署类:CDH和HDP CDH集群安装步骤: https://blog.csdn.net/wt334502157/article/details/120290580 HDP集群安装步骤: 【大数据】大数据 Hadoop 管理工具 Apache Ambari(HDP)_ambari hd 阅读全文
posted @ 2023-10-19 22:46 a-tao必须奥利给 阅读(73) 评论(0) 推荐(0)
摘要:CDH集群日志清理 一、查看磁盘占用情况 df -h 二、查看日志占用情况 cdh的各种组件日志一般在 /var/log 目录下,因此需要关注“/”根目录, 查看 /var/log 下使用空间较大的文件夹,并又大到小排列 cd /var/log/ du -s ./* |sort -nr 还有一个是 阅读全文
posted @ 2023-10-19 22:21 a-tao必须奥利给 阅读(437) 评论(0) 推荐(0)
摘要:### CDH登录后显示【无法发出查询:Host Monitor 未运行】解决办法 >现象:[CDH](https://so.csdn.net/so/search?q=CDH&spm=1001.2101.3001.7020)登录后显示【无法发出查询:Host Monitor 未运行】 ![](htt 阅读全文
posted @ 2023-09-04 09:37 a-tao必须奥利给 阅读(532) 评论(0) 推荐(0)
摘要:# 基于CDH环境下的Hive数仓配置及优化 原文连接地址:https://blog.csdn.net/sinat_31854967/article/details/127274575 ## YARN的基础配置 ### NodeManager CPU配置 - 在YARN界面中,点击配置,然后搜索配置 阅读全文
posted @ 2023-07-12 10:07 a-tao必须奥利给 阅读(328) 评论(0) 推荐(0)
摘要:## 搭建CDH后,hdfs的权限问题 #### 问题描述:搭建cdh集群后,在hdfs中创建文件报错:Permission denied: user=root, access=WRITE, inode=“/“:hdfs:supergroup:drwxr-xr-x ![](https://img20 阅读全文
posted @ 2023-07-08 09:30 a-tao必须奥利给 阅读(557) 评论(0) 推荐(0)
摘要:## 部署集群出现问题总结 ### 1,未在已配置的存储库中找到任何parcel >在装[cdh](https://so.csdn.net/so/search?q=cdh&spm=1001.2101.3001.7020)的时候遇到了问题,配置完parcel存储库以后页面提示:未在已配置的存储库中找到 阅读全文
posted @ 2023-07-07 12:38 a-tao必须奥利给 阅读(154) 评论(0) 推荐(0)