gentleman_hai

玫瑰

摘要： <!DOCTYPE html> <html style="height: 100%" <head> <meta charset="utf-8"> <script src="https://cdn.bootcss.com/echarts/4.1.0.rc2/echarts.min.js"></scri 阅读全文

posted @ 2018-08-20 00:13 gentleman_hai 阅读(192) 评论(0) 推荐(0)

yarn web ui 参数详解

摘要：我们经常使用yarn调度，但是我们是否对调度队列显示参数真正了解呢？下面我们来一一看看这些参数都是做什么用的，代表什么意思 hadoop是通过队列管理集群资源，翻开集群Web UI，找到Schedule查看 <!--5f39ae17-8c62-4a45-bc43-b32064c9388a:W3si 阅读全文

posted @ 2018-08-02 14:45 gentleman_hai 阅读(3636) 评论(0) 推荐(0)

hadoop管理命令

摘要： -help 功能：输出这个命令参数手册 -ls 功能：显示目录信息示例： hadoop fs -ls hdfs://hadoop-server01:9000/ 备注：这些参数中，所有的hdfs路径都可以简写 -->hadoop fs -ls / 等同于上一条命令的效果 -mkdir 功能：在hdf 阅读全文

posted @ 2018-06-25 15:34 gentleman_hai 阅读(562) 评论(0) 推荐(0)

mongodb安装建议

摘要： 1)软件包的选择确保使用最新的稳定版本。目前我们线上使用的版本是2.4.6。MongoDB软件包下载页面http://www.mongodb.org/downloads。确保线上环境总是使用64位版本。32位版本只能用于测试和开发使用，因为32位版本最大只能存储2GB的数据。启动MongoDB的阅读全文

posted @ 2018-05-23 10:19 gentleman_hai 阅读(353) 评论(0) 推荐(0)

timeline server介绍

摘要： 1. timeline是什么 2. timeline能做什么 3. timeline结构 4. timeline怎么配置 1）. timeline是什么？它能存储和检索应用当前和历史信息在yarn配置的地址里，它有两个特性：持久化应用特定信息和保存已完成应用的相关信息目前的现状： 1. time 阅读全文

posted @ 2018-03-01 14:53 gentleman_hai 阅读(7434) 评论(0) 推荐(0)

理解linux下的load

摘要：我们在做Linux负载计算的时候，我们需要了解负载的几个概念 1）Linux负载是什么 2）Linux负载怎么计算 3）如何区分目前负载是“好”还是“坏” 4）什么时候应该注意哪些不正常的值 1）Linux负载是什么我们怎么来理解Linux的负载呢？打个比方一核CPU对应我们一条公路，一个进程阅读全文

posted @ 2018-02-28 17:34 gentleman_hai 阅读(9174) 评论(0) 推荐(1)

hadoop fsck详解

摘要：我们知道fsck是用来检测hdfs上文件、block信息的，但是fsck输出的结果我们是否能看明白呢？下面我们来看一个fsck输出的结果 hadoop fsck / ########################## 情况一 #################### Status: HEALTH 阅读全文

posted @ 2017-11-13 17:26 gentleman_hai 阅读(10225) 评论(0) 推荐(0)

hadoop Non DFS Used是什么

摘要：首先我们先来了解一下Non DFS User是什么？ Non DFS User的意思是：非hadoop文件系统所使用的空间，比如说本身的linux系统使用的，或者存放的其它文件它的计算公式： non dfs used = configured capacity - remaining space 阅读全文

posted @ 2017-11-13 15:02 gentleman_hai 阅读(2624) 评论(0) 推荐(0)

ganglia监控架构

摘要： 1、我们知道ganglia是C/S结构的，我们熟知的就是一台ganglia server，很多slave。这种结构有什么问题？ 1）如果ganglia server出现问题，我们就无法监控到datanode。 2）如果监控节点特别多个100，几百台怎么，一台很明显会处理不过来，web展示会面临很大的阅读全文

posted @ 2017-11-09 21:57 gentleman_hai 阅读(711) 评论(0) 推荐(0)

php正则表达式

摘要：行定位符（^与$）行定位符是用来描述字符串的边界。“$”表示行结尾“^”表示行开始如"^de"，表示以de开头的字符串 "de$",表示以de结尾的字符串。选择字符(|) ，表示或选择字符表示或的意思。如Aa|aA，表示Aa或者是aA的意思。注意使用”[]”与”|”的区别，在于”[]”只能匹配阅读全文

posted @ 2017-11-08 20:24 gentleman_hai 阅读(187) 评论(0) 推荐(0)

玫瑰