随笔分类 -  大数据平台

摘要:一、手动导入 scm 库 背景:正常安装 cloudera-scm-server 时,安装 scm 库是通过脚本 /usr/share/cmf/schema/scm_prepare_database.sh 来自动建库的。 /usr/share/cmf/schema/scm_prepare_datab 阅读全文
posted @ 2019-07-24 01:39 笨小康u 阅读(2090) 评论(0) 推荐(0)
摘要:背景:部署CDH集群的 hive 服务,选用 mysql 作为 hive 元数据的存储数据库,通过 hive cli 建表时发现中文注释均乱码。 现象:hive端建表中文注释乱码。 定位: 已经确认过 mysql 库的默认编码是 utf-8,并且 mysql 中建库建表不存在中文乱码的情况。 于是查 阅读全文
posted @ 2019-07-24 01:10 笨小康u 阅读(1353) 评论(1) 推荐(0)
摘要:cloudera公司发布的CDH集群,使用Cloudera Manager来管理整个集群,使用过程中主要涉及到几个关键概念:cluster、service、role、host。直接上图,直观理解几个概念。 cluster、service cluster顾名思义是集群,所有组件组合的集合,一个Clou 阅读全文
posted @ 2019-07-03 21:23 笨小康u 阅读(352) 评论(0) 推荐(0)
摘要:1. Cloudera Management Service服务全部无法启动 观察到的现象: (1)cm service 组件无法启动,启动时服务请求超时终止;(2)主机信息也无法获取到,一直提示“无法与服务端取得联系”(3)cm-server日志中提示“Authentication failure 阅读全文
posted @ 2019-01-29 11:06 笨小康u 阅读(3979) 评论(0) 推荐(0)
摘要:一、Cloudera Manager简介 Cloudera Manager(后面简称CM)是CDH(Cloudera’s Distribution Including Apache Hadoop)市场领先的管理平台,对CDH每个部件都提供细粒度的可视化的监控,可以方便地部署,并且集中式的操作完整的大 阅读全文
posted @ 2018-09-19 11:15 笨小康u 阅读(646) 评论(0) 推荐(0)