会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
zhaoxinhui
2021年10月30日
大数据-hadoop-NameNode格式化注意事项
摘要: 尚硅谷课程笔记:
阅读全文
posted @ 2021-10-30 21:18 方木Fengl
阅读(48)
评论(0)
推荐(0)
大数据-hadoop-Log日志查看和NN格式化前强调
摘要: 不要随便的格式化,要想格式化 要进行这两步,首先就是查看进程是否开启,如果是开启状态,先关掉,然后第二步,删掉数据。然后再进行格式化。 Log日志查看: 出现问题的时候就查看这个文件
阅读全文
posted @ 2021-10-30 16:54 方木Fengl
阅读(78)
评论(0)
推荐(0)
大数据-hadoop-环境搭建-伪分布式模式
摘要: 伪分布式模式的配置是按照完全分布式模式来搭建的,但是他只有一台服务器,适合用于学习。 下面的文件配置都是尚硅谷课程中做的笔记: 配置集群: 需要配置文件: 第一个文件: 第二个文件: 第三个文件: 默认的副本数是3, 接下来就要启动集群, 第一步:格式化namenode(只有第一次需要格式化,格式化
阅读全文
posted @ 2021-10-30 16:43 方木Fengl
阅读(177)
评论(0)
推荐(0)
大数据-hadoop-官方WordCount案例-本地模式
摘要: 这是一个非常经典的案例: 就是统计单词的个数,统计个数的就可以使用到wordcount 这是在尚硅谷的课程中做的笔记:
阅读全文
posted @ 2021-10-30 11:26 方木Fengl
阅读(50)
评论(0)
推荐(0)
大数据-hadoop-grep官方案例-本地模式
摘要: 能执行这个本地grep官方案例,就说明hadoop的本地环境已经配置好了 首先在hadoop-3.3.0文件夹下建立一个input文件夹,切换到hadoop-3.3.0的目录下,然后执行: bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-
阅读全文
posted @ 2021-10-30 11:16 方木Fengl
阅读(161)
评论(0)
推荐(0)
大数据-hadoop-运行模式
摘要: 1、hadoop的运行模式包括:本地模式、伪分布式模式、完全分布式模式 本地模式就是数据存储咋Linux本地,测试偶尔用一下, 伪分布式模式就是数据存储在hdfs上,一般学习用, 完全分布式模式数据也是存储在hdfs上,多台服务器工作,一般在企业中使用
阅读全文
posted @ 2021-10-30 11:10 方木Fengl
阅读(164)
评论(0)
推荐(0)
导航
博客园
首页
新随笔
联系
订阅
管理
公告