09 2020 档案

HDFS的shell操作
摘要：一、基本语法 hadoop fs +命令 #该命令可以用于其他文件系统，不止是hdfs文件系统内，也就是说该命令的使用范围更广 hadoop dfs +命令 #专门针对hdfs分布式文件系统，dfs是fs的实现类 hdfs dfs +命令 #和上面的命令作用相同，相比于上面的命令更为推荐，并且当使用 阅读全文
posted @ 2020-09-22 23:53 maider 阅读(166) 评论(0) 推荐(0)
hadoop集群搭建——4/4——开始使用hdfs
摘要：http://192.168.2.100:50070/explorer.html#/ 为了能够顺利下载，修改windows的hosts文件：C:\Windows\System32\drivers\etc ipconfig /flushdns #Win+R->cmd 使用/测试hdfs： 上传小文件： 阅读全文
posted @ 2020-09-20 21:37 maider 阅读(134) 评论(0) 推荐(0)
hadoop集群搭建——3/4——hadoop的安装和集群的启停
摘要：一、安装hadoop rz -E #选择jar包，解压 tar -zxvf hadoop-2.7.2.tar.gz -C ../servers/ 设置环境变量： vim /etc/profilesource /etc/profile 末尾追加以下内容： export HADOOP_HOME=/exp 阅读全文
posted @ 2020-09-20 20:24 maider 阅读(253) 评论(0) 推荐(0)
hadoop集群搭建——2/4——虚拟机之间的免密登录
摘要：一：使用远程工具SecureCRT连接虚拟机，点击快速连接 软件设置：选项——>全局/会话选项 二：关闭防火墙和SELinux service iptables stop #关闭防火墙 chkconfig iptables off #禁止开机启动 vim /etc/selinux/config 三： 阅读全文
posted @ 2020-09-20 00:06 maider 阅读(410) 评论(0) 推荐(0)