摘要：
前言 在自己的win电脑想连机房的hadoop开发，发现idea已经有个官方的插件可以连hadoop和hdfs之类的了，打算试试，但输入端口和用户名后连接失败报如下错误❗HADOOP_HOME is not defined： 网上找了一波解决方法后看到了这样一篇博客，于是顺便把整个解决的过程记录下来 阅读全文
posted @ 2021-09-18 11:21 Bumon 阅读(976) 评论(0) 推荐(0)
摘要：
linux下解压rar 参考链接：https://www.runoob.com/note/28602 写这个是为了记录整理一下 linux解压zip和tar的都好说，这里是额外安装一个支持解压rar的软件 下载地址：https://www.rarlab.com/download.htm 下载完后安装 阅读全文
posted @ 2021-08-26 13:47 Bumon 阅读(69) 评论(0) 推荐(0)
摘要：
使用Python脚本写日志记录集群信息 背景 最近本地hadoop集群经常出现ssh连不上，ping不通的问题，而且根目录会突然空间不足，于是领到了一个集群运维的任务。那运维的第一步就是先写个脚本记录下系统的信息，帮助定位问题发生在什么地方。写这篇博客主要参考了以下链接： https://www.c 阅读全文
posted @ 2021-08-19 21:12 Bumon 阅读(98) 评论(0) 推荐(0)
摘要：
hadoop3.3.0集群搭建记录 hadoop3.3.0 hive3.1.2 spark3.0.0 主要安装了上面这仨👆 安装Java #sudo apt install openjdk-8-jre-headless #sudo apt install openjdk-8-jdk-headles 阅读全文
posted @ 2021-08-19 15:52 Bumon 阅读(609) 评论(0) 推荐(0)
摘要：
前言 记录了一些出现的问题，但大部分都是问题而没有解决方法… 参考网址： https://docs.mongodb.com/manual/tutorial/install-mongodb-on-ubuntu/ 按网上的教程安装（error） 先去官网https://www.mongodb.com/t 阅读全文
posted @ 2021-08-19 15:33 Bumon 阅读(127) 评论(0) 推荐(0)
摘要：
前言 记录一下mongodb mapreduce的过程 导入数据 [root@iZwz96vtq89cjkainh889cZ bin]# mongoimport --port 28010 --authenticationDatabase admin --username root --passwor 阅读全文
posted @ 2021-08-19 15:25 Bumon 阅读(201) 评论(0) 推荐(0)
浙公网安备 33010602011771号