会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
XIAOZHAOZHAO
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
5
6
7
8
9
10
11
12
13
···
23
下一页
2022年8月3日
Hadoop 十
摘要: 实现SSH免密登陆 1、在A服务器上创建密钥对(公钥和私钥) 输入这个命令后,四次回车 2、将公钥拷贝给B服务器,授权key 3、ssh访问B服务器 4、B服务器接收数据后,去授权key中查找A服务器的公钥,并解密数据 5、采用A公钥加密的数据返回给A 6、接收数据后,用A的私钥解密数据 配置102
阅读全文
posted @ 2022-08-03 20:42 信2005-2赵磊
阅读(24)
评论(0)
推荐(0)
2022年8月1日
hadoop九
摘要: rsync 远程同步工具 rsync -av $pdir/$fname $user@$host:$pdir/$fname 参数 要拷贝的文件路径/名称 目的地用户@主机:目的地路径/名称 选项 功能 -a 归档拷贝 -v 显示复制过程 每次输入命令太过复杂,可以完成一个集群分发脚本。 1、rsync
阅读全文
posted @ 2022-08-01 17:57 信2005-2赵磊
阅读(18)
评论(0)
推荐(0)
2022年7月31日
Hadoop八
摘要: 今天学习Hadoop运行模式:Local Mode、Pseudo-Distributed Mode、Fully-Distributed Mode Local Mode:数据存储在linux本地 执行命令时,输出路径不能存在。 一开始出现了错误,显示的两个文档都是空的,原因是创建输入文档的时候,在ha
阅读全文
posted @ 2022-07-31 14:10 信2005-2赵磊
阅读(24)
评论(0)
推荐(0)
2022年7月30日
第五周总结
摘要: 不知不觉间来到了第五周,这一周也是正式学习大数据的第一周,这一周主要是做准备活动,进行了虚拟机的安装,配置,克隆,jdk的安装,工具集的安装等等,中间出现了不少小差错,解决不了的又重新开始了一遍,已经是8月了,还有一个月的学习时间,还有一个月的居家学习时间,学习的任务却很多,还是得继续学习。 这一周
阅读全文
posted @ 2022-07-30 22:03 信2005-2赵磊
阅读(22)
评论(0)
推荐(0)
2022年7月28日
Hadoop七
摘要: 今日任务 在hadoop里面安装JDK和Hadoop 分别配置他们两个的环境变量 在自己创建的my_env.sh文件中(环境变量文件) 其中 #是注释。
阅读全文
posted @ 2022-07-28 23:38 信2005-2赵磊
阅读(26)
评论(0)
推荐(0)
Hadoop六
摘要: 今天完成的任务 完成了虚拟机的克隆 配置克隆虚拟机的ip地址和主机名称 配置Xshell 继续安装JDK,在102上安装JDK,然后将其拷贝
阅读全文
posted @ 2022-07-28 22:50 信2005-2赵磊
阅读(23)
评论(0)
推荐(0)
2022年7月27日
Hadoop五
摘要: 今天继续安装, 安装了epel-release , 此软件相当于一个软件仓库。 关闭Linunx系统的防火墙 给用户配置root权限 在/opt目录下创建文件夹,并修改所属主和所属组。 卸载虚拟机安装的JDK 重启虚拟机 其中的一些Linux的命令,感觉有些熟悉,却不知道是什么意思,只能按照教程一步
阅读全文
posted @ 2022-07-27 13:55 信2005-2赵磊
阅读(13)
评论(0)
推荐(0)
Hadoop四
摘要: 今天进行了Xshell的安装和配置,Xshell可以在Windows界面下用来访问远端不同系统下的服务器,从而比较好的达到远程控制终端的目的。 遇见的问题: 解决办法:当链接的时候,需要把虚拟机打开。 顺便把Xftp安装了下来
阅读全文
posted @ 2022-07-27 00:30 信2005-2赵磊
阅读(23)
评论(0)
推荐(0)
2022年7月25日
Hadoop三
摘要: 今天进行了Centos的安装,首先下载VMware,Centos镜像下载及安装教程可以参考博客:https://blog.csdn.net/SDAU_LGX/article/details/120669344 安装完成后 然后又去配置IP地址,主机名称,配置完成后测试通过,今天的任务结束,还需要去下
阅读全文
posted @ 2022-07-25 23:36 信2005-2赵磊
阅读(13)
评论(0)
推荐(0)
2022年7月24日
Hadoop学习二
摘要: HDFS 是分布式文件系统 NameNode(nn):存储文件的元数据,如文件名、文件目录结构、文件属性(生成时间、副本数、文件权限),以及每个文件的块列表和块所在的DataNode等。 DataNode(dn):在本地文件系统存储文件块系统,以及块数据的校验和。 Secondary NameNod
阅读全文
posted @ 2022-07-24 23:30 信2005-2赵磊
阅读(21)
评论(0)
推荐(0)
上一页
1
···
5
6
7
8
9
10
11
12
13
···
23
下一页
公告