随笔分类 -  CDH学习

cdh_host
摘要：测试环境平台别名 操作系统 地址 用户名 密码 部署系统cpu(core) 内存(G) 硬盘(G)fvt-d-worker-01 Red Hat Enterprise Linux Server release 6.5 (Santiago) 10.60.81.157 jboss Qhiptt_9 4 阅读全文
posted @ 2019-05-21 16:13 何国秀_xue 阅读(257) 评论(0) 推荐(0)
CDH相关包的下载地址：
摘要：CDH相关包的下载地址：http://archive.cloudera.com/cm5/cm/5/http://archive.cloudera.com/cdh5/parcels/latest/ 用户：userdel -r cloudera-scm ps -ef | grep cloudera-sc 阅读全文
posted @ 2019-05-21 16:09 何国秀_xue 阅读(2673) 评论(0) 推荐(0)
集群服务
摘要：01. IP：171.196.43.101 Host：headmachine CPU：24个 Mem：96G 02. IP：171.196.43.102 Host：dc01 CPU：24个 Mem：96G03. IP：171.196.43.103 Host：dt01 CPU：24个 Mem：96G0 阅读全文
posted @ 2019-02-21 15:32 何国秀_xue 阅读(201) 评论(0) 推荐(0)
CDH角色
只有注册用户登录后才能阅读该文。
posted @ 2019-01-04 14:22 何国秀_xue 阅读(7) 评论(0) 推荐(0)
CDH环境搭建
摘要：一、CDH环境搭建目录 --CDH相关包的下载地址：http://archive.cloudera.com/cm5/cm/5/http://archive.cloudera.com/cdh5/parcels/latest/ 创建用户用户：userdel -r cloudera-scmgroupadd 阅读全文
posted @ 2018-12-18 10:03 何国秀_xue 阅读(675) 评论(0) 推荐(0)
基于CDH 5.9.1 搭建 Hive on Spark 及相关配置和调优
摘要：Hive默认使用的计算框架是MapReduce，在我们使用Hive的时候通过写SQL语句，Hive会自动将SQL语句转化成MapReduce作业去执行，但是MapReduce的执行速度远差与Spark。通过搭建一个Hive On Spark可以修改Hive底层的计算引擎，将MapReduce替换成S 阅读全文
posted @ 2018-12-14 17:09 何国秀_xue 阅读(597) 评论(0) 推荐(0)