随笔分类 -  大数据

摘要:cloudera manager 可以简化 Hadoop 的安装配置过程,自动在集群节点上安 装 hadoop 相关组件,创建用户,并管理各个组件服务。本手册以 cloudera manager 的 free 版本,以下 5 台机器为例安装 hadoop 集群: 192.168.106.36 192 阅读全文
posted @ 2019-09-07 18:54 appleYang 阅读(1028) 评论(0) 推荐(0)
摘要:最近,自己摸索着怎样更了解Hbase,hadoop(MapReduce,Hdfs)等,所以用谷歌FQ找到了一些非常不错的学习资源(持续更新中) 欢迎各位业界人士一起收集些资源学习 阅读全文
posted @ 2019-07-09 17:23 appleYang 阅读(297) 评论(0) 推荐(0)
摘要:ERROR: Can't get master address from ZooKeeper; znode data == null 一定注意这只是问题的第一层表象,真的问题是: File /hbase/.tmp/hbase.version could only be replicated to 0 阅读全文
posted @ 2018-09-22 11:39 appleYang 阅读(15873) 评论(2) 推荐(0)
摘要:一、大数据运维之Linux基础 打好Linux基础,以便更好地学习Hadoop,hbase,NoSQL,Spark,Storm,docker,openstack等。因为企业中的项目基本上都是使用Linux环境下搭建或部署的。 1)Linux系统概述2)系统安装及相关配置 3)Linux网络基础 4) 阅读全文
posted @ 2018-03-31 16:23 appleYang 阅读(4589) 评论(4) 推荐(1)
摘要:本节将引入完美的granafa仪表板,在上节的基础上,并提出自己的一些监控数据的总结和看法 你可以有一个类似于这个的Dashboard,会引入监控Zimbra协作 本节环境采用的是centos7系统,配置跟上节介绍的一样,但是Telegraf是企业级监控加入很多可靠的监控插件,非常有用的一些参数,随 阅读全文
posted @ 2018-03-15 22:40 appleYang 阅读(1417) 评论(3) 推荐(0)
摘要:完成一套精准,漂亮图形化监控系统从这里开始第一步 Telegraf是收集和报告指标和数据的代理 它是TICK堆栈的一部分,是一个用于收集和报告指标的插件驱动的服务器代理。Telegraf拥有插件或集成功能,可直接从运行的系统获取各种指标,从第三方API获取指标,甚至通过StatsD和Kafka消费者 阅读全文
posted @ 2018-03-10 00:12 appleYang 阅读(3089) 评论(5) 推荐(1)
摘要:Hadoop+HBase+ZooKeeper三者关系与安装配置 阅读全文
posted @ 2018-02-26 18:31 appleYang 阅读(478) 评论(0) 推荐(0)