2020年1月12日
聊聊关于YARN的全局调度
摘要： 文章目录前言带有约束限制的调度全局调度的要求... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(401) 评论(0) 推荐(0)
HDFS DeadNode Detection机制
摘要： 文章目录前言HDFS DFSClient现有... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(402) 评论(0) 推荐(0)
RocksDB部分优化设计
摘要： 文章目录前言RocksDB部分功能设计Aut... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(706) 评论(0) 推荐(0)
HDFS Decommission改进设计
摘要： 文章目录前言现有Decommission机制... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(415) 评论(0) 推荐(0)
高性能存储引擎RocksDB总体概览
摘要： 文章目录前言RocksDB的整体模块Rock... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(2803) 评论(0) 推荐(0)
Ozone集群搭建以及基本使用
摘要： 文章目录前言Ozone的背景介绍Ozone集... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(675) 评论(0) 推荐(0)
HDFS RPC处理性能提升之IBR(增量块汇报)的延时批处理
摘要： 文章目录前言HDFS DataNode高频度... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(820) 评论(0) 推荐(0)
分布式内存存储式元数据服务的构建
摘要： 文章目录前言内存式元数据服务概述通用的简单K... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(412) 评论(0) 推荐(0)
如何提高分布式系统的可观察性：Insight Tool的引入
摘要： 文章目录前言系统的三大Insight视角三大... 阅读全文
posted @ 2020-01-12 19:08 回眸,境界 阅读(94) 评论(0) 推荐(0)
2019年1月18日
工作中Hadoop,Spark,Phoenix,Impala 集群中遇到坑及解决方案
摘要： 1.HDFS 修复 问题描述：其他部门在yarn平台上跑spark 程序错误的生成了海量的不到100K的小文件，导致namenode压力过大，其中一个namenode宕机后，没有及时发现 使得edits文件大量积累，在namenode1宕机后，namenode2 随后在凌晨1点也宕机。 原因分析：N 阅读全文
posted @ 2019-01-18 12:22 回眸,境界 阅读(1449) 评论(0) 推荐(0)