2019年7月17日
Hadoop hadoop 机架感知配置
摘要： 机架感知脚本 使用python3编写机架感知脚本，报存到topology.py，给予执行权限 import sys import os DEFAULT_RACK="/default-rack" HADOOP_CONF_DIR = os.environ['HADOOP_CONF_DIR'] FILE= 阅读全文
posted @ 2019-07-17 18:38 北漂-boy 阅读(645) 评论(0) 推荐(0)
namenode 性能优化 RPC队列拆分
摘要： 一、Service RPC port NameNode默认使用8020端口侦听所有的RPC请求（HDP版本），包括客户端数据请求，DataNode心跳和block上报，ZKFC模块监控检查和切换控制。当集群规模越和RPC请求来越大时，RPC请求响应时间也变得越来越长。 NameNode也给DataN 阅读全文
posted @ 2019-07-17 09:19 北漂-boy 阅读(2326) 评论(0) 推荐(0)