摘要：目的 刚入门spark，安装的是CDH的版本，版本号spark-core_2.11-2.4.0-cdh6.2.1，部署了cdh客户端（非集群节点），本文主要以spark-shell为例子，对在cdh客户端上提交spark作业原理进行简单分析，加深理解 spark-shell执行 启动spark-sh 阅读全文

摘要：问题 hbase shell中建立建表出错 分析 org.apache.hadoop.hbase.PleaseHoldException: Master is initializing代表Master正在初始化中，出现这种错误的原因有很多，查看hbase web界面，发现如下提示： 看下Master 阅读全文

摘要：问题 在cdh集群中开启了kerberos认证，hbase集群出现一点问题，需要通过zookeeper-client访问zookeeper，删除/hbase节点时候报错：Authentication is not valid : /hbase 解决 登录zk，查看权限 zookeeper-clien 阅读全文

摘要：自定义flink的RedisSource，实现从redis中读取数据，这里借鉴了flink-connector-redis_2.11的实现逻辑，实现对redis读取的逻辑封装，flink-connector-redis_2.11的使用和介绍可参考之前的博客，项目中需要引入flink-connecto 阅读全文

摘要：Cloudera Manager提供了很多API供用户进行访问，因此可以利用其提供的API进行大数据集群中各种服务的状态检测、监控以及服务的启停操作。 版本信息 Cloudera Manager 6.2.1 API文档入口 CM通过swagger提供了API文档说明 API使用例子 获取集群信息 / 阅读全文