2021年10月19日

运维相关命令

摘要：磁盘以及tcp连接数检查。常用运维命令 lsblk 查看分区和磁盘 df -h 查看空间使用情况 fdisk -l 分区工具查看分区信息 cfdisk /dev/sda 查看分区 blkid 查看硬盘label（别名） du -sh ./* 统计当前目录各文件夹大小 free -h 查看内存大小 c 阅读全文

posted @ 2021-10-19 17:20 学习的小文阅读(40) 评论(0) 推荐(0) 编辑

azkaban整体工作流程

摘要： 1、工作流程 WEB: ExecutorServlet web端执行一个流的入口 1、ajaxExecuteFlow执行这个方法 1、getProjectAjaxByPermission执行这个方法，判断用户是否有权限执行这个工程 2、final ExecutableFlow exflow = Fl 阅读全文

posted @ 2021-10-19 17:18 学习的小文阅读(148) 评论(0) 推荐(0) 编辑

kafka重分区原理

摘要：重分区原理 ReassignPartitionsCommand类 executeAssignment() 这个方法是调了execute以后执行的方法 1、判断是否有重分区任务在执行，判断条件就是zookeeper的/admin/reassign_partitions路径是否存在， reassignP 阅读全文

posted @ 2021-10-19 17:17 学习的小文阅读(208) 评论(0) 推荐(0) 编辑

zookeeper中kafka的元数据

摘要： zookeeper中kafka的元数据 1、topic的分区信息 2、topic的分区存储信息. /brokers/topics/test { "version":1, // 版本编号目前固定为数字1 "partitions":{ // partitionId编号 "1":[ //同步副本组brok 阅读全文

posted @ 2021-10-19 17:11 学习的小文阅读(337) 评论(0) 推荐(0) 编辑

python的虚拟环境搭建

摘要：制作python环境，虚拟环境 centos内核的服务器一、下载安装pyenv，一个做python 版本管理的工具 export PYENV_ROOT="/root/.pyenv" yum install git curl https://pyenv.run | bash 新建文件 /root/. 阅读全文

posted @ 2021-10-19 17:09 学习的小文阅读(108) 评论(0) 推荐(0) 编辑

公告

导航

2021年10月19日