2021年8月19日

使用Python脚本写日志记录集群信息

摘要： 使用Python脚本写日志记录集群信息 背景 最近本地hadoop集群经常出现ssh连不上，ping不通的问题，而且根目录会突然空间不足，于是领到了一个集群运维的任务。那运维的第一步就是先写个脚本记录下系统的信息，帮助定位问题发生在什么地方。写这篇博客主要参考了以下链接： https://www.c 阅读全文

posted @ 2021-08-19 21:12 Bumon 阅读(98) 评论(0) 推荐(0)

Hadoop 3.3.0完全分布式安装过程记录

摘要： hadoop3.3.0集群搭建记录 hadoop3.3.0 hive3.1.2 spark3.0.0 主要安装了上面这仨👆 安装Java #sudo apt install openjdk-8-jre-headless #sudo apt install openjdk-8-jdk-headles 阅读全文

posted @ 2021-08-19 15:52 Bumon 阅读(609) 评论(0) 推荐(0)

Ubuntu16.04安装mangodb的记录

摘要： 前言 记录了一些出现的问题，但大部分都是问题而没有解决方法… 参考网址： https://docs.mongodb.com/manual/tutorial/install-mongodb-on-ubuntu/ 按网上的教程安装（error） 先去官网https://www.mongodb.com/t 阅读全文

posted @ 2021-08-19 15:33 Bumon 阅读(127) 评论(0) 推荐(0)

使用mongodb进行mapreduce运算

摘要： 前言 记录一下mongodb mapreduce的过程 导入数据 [root@iZwz96vtq89cjkainh889cZ bin]# mongoimport --port 28010 --authenticationDatabase admin --username root --passwor 阅读全文

posted @ 2021-08-19 15:25 Bumon 阅读(201) 评论(0) 推荐(0)