大数据学习记录,一
hadoop学习
一。
WordCount程序打成jar包放在集群中运行




点击Finish会弹个窗体点击OK即可
最后

下载本地之后上传到Xmanager Enterprise 5 中的 xftp 中

建个文件扔进去即
使用Xmanager Enterprise 5 中的 Xshell 连接liunx虚拟机 cd 到指定目录 - -(放Jar包的地方)

使用命令

/input/:输入路径
/put/*:输出路径,不可提前创建
回车等待即可
完成后
输入命令查看运行结果


二。
1. HDFS Shell操作
查询根目录

查询文件夹下的文件

创建文件夹

上传本地文件到HDFS中



删除文件
删除put/下的所有文件

删除文件夹

从HDFS中复制文件到本地

./ :本地路径

查询文件内容

移动HDFS中的文件

检查文件系统健康情况


复制HDFS中的文件

显示目录文件大小

如果是目录,则显示总大小

清空回收站
回收站无法查看!!!


浙公网安备 33010602011771号