随笔分类 -  Hadoop01

摘要:12 getmerge:合并到本地 (hdfs) 阅读全文
posted @ 2019-04-10 15:39 lilixia 阅读(211) 评论(0) 推荐(0)
摘要:重新删掉.ssh 秘钥文件 重新生成文件 配置免密 cd ~ 》》ls -la 》》 rm -rf .ssh <property> <name>yarn.resourcemanager.webapp.address</name> <!--web服务器的端口 --> <value>linux01:80 阅读全文
posted @ 2019-04-09 15:38 lilixia 阅读(305) 评论(0) 推荐(0)
摘要:保存 重启电脑 打开Linux系统 阅读全文
posted @ 2019-04-08 21:18 lilixia 阅读(283) 评论(0) 推荐(0)
摘要:安装伪分布式流程 1.关防火墙 2.设置IP地址 3.设置network文件hosts映射文件 4.安装jdk 5.安装hadoop 6.配置hadoop: hadoop-env.sh、core-site.xml、hdfs-site.xml、 Mapred-site.xml、yarn-site.xm 阅读全文
posted @ 2019-04-04 16:12 lilixia 阅读(185) 评论(0) 推荐(0)
摘要:秘钥配置不成功的参考https://blog.csdn.net/lisongjia123/article/details/78513244 配置秘钥 1.生成秘钥 ssh-keygen -t rsa 2.copy别的机子id ssh-copy-id 机器ip 3.配置映射 vim /etc/host 阅读全文
posted @ 2019-04-02 20:10 lilixia 阅读(691) 评论(0) 推荐(0)
摘要:*修改Linux克隆的物理地址 和 IP地址 第一步 修改物理地址 和删除复制的物理地址 vim /etc/udev/rules.d/70-persistent-net.rules 第二步 修改ip和物理地址 cd /etc/sysconfig/network-scripts/ vim ifcfg- 阅读全文
posted @ 2019-04-02 17:13 lilixia 阅读(374) 评论(0) 推荐(0)
摘要:第一步:打开工具上传tar包 如下图 第二步:在文件路径下查看是否上传成功 第三步:解压tar包 tar -zxvf hadoop.2.6.5.tar.gz 第四步:配置环境变量 vim /etc/profile 第五步:源码配置一下 source /etc/profile 第六步:测试一下 had 阅读全文
posted @ 2019-04-02 16:59 lilixia 阅读(856) 评论(0) 推荐(0)
摘要:1. 关闭window防火墙 2.。创建虚拟机 3.设置仅主机模式 4.设置两台机器的ip 5.关闭linux防火墙 6.ping id 不懂如下图: 注意:第五步的时候 要按ctrl+c 不然会一直加载 重启网卡 临时关闭linux防火墙 永久关闭linux防火墙 查看linux防火墙的状态 在l 阅读全文
posted @ 2019-04-01 17:21 lilixia 阅读(186) 评论(0) 推荐(0)
摘要: 阅读全文
posted @ 2019-03-30 19:25 lilixia 阅读(147) 评论(0) 推荐(0)
摘要:快捷键 基本操作和命令 Cd转换文件夹 以/开头的是绝对路径 没有/相对路径 ../代表上一级目录 Tab补充 Ctrl+R 查找历史输入过的命令 箭头上也代表能够查询以往输入的命令 Ctrl+C 终止或退出当前操作 Pwd是查看当前位置 cd ~ 进入家目录 cd -回到上层目录 Table键的使用 1. 自动补全命令或目录 2. 在某个目录下只有一个目录的时候可以不用输入... 阅读全文
posted @ 2019-03-30 19:18 lilixia 阅读(298) 评论(0) 推荐(0)
摘要:Hadoop (离线) 分布式的计算框架 scala---spark(实时计算框架) 阅读全文
posted @ 2019-03-29 09:08 lilixia 阅读(196) 评论(0) 推荐(0)
摘要:VMware-workstation14安装步骤: 首先现在虚拟机wmware,我现在的版本是:VMware-workstation-full-14.1.1.28517.exe 到处这里就安装完成: 桌面双击打开虚拟机:输入密钥:YC592-8VF55-M81AZ-FWW5T-WVRV0 到处这里破 阅读全文
posted @ 2019-03-28 19:59 lilixia 阅读(539) 评论(0) 推荐(0)
摘要:安装linux系统 需要准备的软件: 1、VMware-workstation-full-14.1.1.28517.exe 2、CentOS-6.5-x86_64-bin-DVD1.iso镜像文件 第一步:创建一个新的虚拟机 第二步:选择“典型(推荐),选择“下一步” 第三步:选择“安装程序光盘映像 阅读全文
posted @ 2019-03-28 18:07 lilixia 阅读(265) 评论(0) 推荐(0)