乐百事

摘要： 1.准备安装包 官网下载即可: 2.配置环境 2.1. 修改用户最大进程数和文件句柄数 vim /etc/security/limits.conf #添加以下内容 * hard nproc 65536 * soft nproc 120000 * hard nofile 65536 * soft no 阅读全文

摘要： 一.机器准备 准备三台虚拟机,配置如下 二.安装hadoop生态各软件 1.准备安装包 1.1 linux预配置及优化 1.1.1 添加普通用户及添加sudo权限 #添加用户 useradd lemo #设置密码 passwd lemo #切换root用户,添加sudo权限 vim /etc/sud 阅读全文

摘要： azkaban安装部署文档 一.下载编译源码 1.下载源码 源码下载 : 在github上下载对应版本的azkaban源码,我这里下载的是azkaban3.34.0 传送门 : https://github.com/azkaban/azkaban/archive/refs/tags/3.34.0.t 阅读全文

摘要： 一. 服务器准备 我这里是本地虚拟机搭建,共四台服务器主机,cdp01是管理节点,cdp01,02和03是数据节点.mysql是数据库节点.也可以把mysql节点放在集群内部,由于我这里搭建了c5和c7两个版本的集群,为了不重复搭建mysql就单独搭了一个mysql服务器,后面准备研究以下如何用do 阅读全文

摘要： 说明: 在之前搭建cdp集群是,cdp01服务器在克隆出来之后,虽然扩展了磁盘空间,但有50g的空间实际是没有分配的,现在将这50g的空间分配给根目录 1. 查看磁盘分区信息 fdisk -l 查看磁盘空间 df -h 2. 新建分区 fdisk /dev/sda # 查看分区 p # 新建分区,这 阅读全文