随笔档案「2022年9月」 - 地岁寒

记一次pushgateway因文件句柄数太多未回收的问题

摘要：1. 问题描述： Flink上报metrics到pushGateway，pushGwateway因打开在多文件而拒绝Flink TaskManager上报数据的连接。查看pushGateway的日志如下： 2022/09/27 03:09:33 http: Accept error: accept 阅读全文

posted @ 2022-09-28 19:22 地岁寒阅读(1197) 评论(2) 推荐(0)

四层负载与七层负载的区别

摘要：待续阅读全文

posted @ 2022-09-21 17:17 地岁寒阅读(30) 评论(0) 推荐(0)

Nginx/LVS高可用配置方法

摘要：待续阅读全文

posted @ 2022-09-21 17:16 地岁寒阅读(13) 评论(0) 推荐(0)

Flink on yarn使用cgroup做资源隔离与flink on k8s的资源隔离对比

摘要：1. Yarn Cgroup 阅读全文

posted @ 2022-09-21 16:47 地岁寒阅读(85) 评论(0) 推荐(0)

Yarn联邦

摘要：待续阅读全文

posted @ 2022-09-21 16:45 地岁寒阅读(35) 评论(0) 推荐(0)

Yarn相关进程

摘要：1. ResourceManager 2. webAppProxyServer 3. ApplicationHistoryServer 4. nodemanager 阅读全文

posted @ 2022-09-21 16:44 地岁寒阅读(57) 评论(0) 推荐(0)

Nginx配置

摘要：一. Nginx用途简介 Nginx是一个功能强大的Web服务器加反向代理服务器，同时又是邮件服务器等。在项目使用中，使用最多的三个核心功能是反向代理、负载均衡和静态服务器二. 配置文件简介 mian #全局配置 worker_processes 1; #Ngix服务器并发处理服务的关键配置，w 阅读全文

posted @ 2022-09-20 12:17 地岁寒阅读(119) 评论(0) 推荐(0)

Yarn使用ZK做高可用

摘要：1. 目前可用的YARN resourceManager状态存储实现类有如下三个： org.apache.hadoop.yarn.server.resourcemanager.recovery.ZKRMStateStore # a ZooKeeper based state-store implem 阅读全文

posted @ 2022-09-19 20:18 地岁寒阅读(218) 评论(0) 推荐(0)