随笔分类 -  Hadoop

hadoop MapReduce报错--误: 找不到或无法加载主类 org.apache.hadoop.mapreduce.v2.app.MRAppMaster（待重写）
摘要：错误展示： 解决办法： 命令行输入hadoop classpath，在hadoop集群中的yarn-site.xml和mapred-site.xml文件中加入如下格式内容,然后用stop-all.sh和start-all.sh重启集群 <property> <name>yarn.applicatio 阅读全文
posted @ 2025-04-18 17:23 基础狗 阅读(229) 评论(0) 推荐(0)
记录一次Hadoop高可用搭建实验
摘要：原文链接：https://www.cnblogs.com/liugp/p/16607424.html 系统镜像：CentOS-7-x86_64-Everything-2207-02.iso ZooKeeper二进制包：zookeeper-3.4.8.tar.gz 1.下载 官网：https://ar 阅读全文
posted @ 2025-03-09 21:19 基础狗 阅读(41) 评论(0) 推荐(0)
hadoop--twill
摘要：https://twill.apache.org/（已停用） 阅读全文
posted @ 2025-01-21 18:25 基础狗 阅读(15) 评论(0) 推荐(0)
hadoop完全分布式模式
摘要：1.下载、上传、解压，添加环境变量。 tar zxf /opt/software/hadoop-2.7.6.tar.gz -C /usr/local/src 2.JAVA_HOME hadoop-env.sh ：修改JAVA_HOME export JAVA_HOME=/usr/local/src/ 阅读全文
posted @ 2024-10-17 15:11 基础狗 阅读(52) 评论(0) 推荐(0)
hadoop伪分布式模式
摘要：1.下载，上传，解压，配置环境变量 2.修改配置文件 2.1 HDFS core-site.xml <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000</value> </property 阅读全文
posted @ 2024-10-10 16:46 基础狗 阅读(21) 评论(0) 推荐(0)
Hadoop单机模式
摘要：测试用软件 SecureCRT&SecureFX VMware Workstation 16.1.2 Pro for Windows CentOS Linux release 7.9.2009 (Core) 1.安装JDK 1.1 下载解压 tar zxf jdk-8u151-linux-x64.t 阅读全文
posted @ 2024-10-08 00:08 基础狗 阅读(33) 评论(0) 推荐(0)