随笔分类 -  Hadoop

在Hadoop的安装和使用中遇到的问题
摘要:1. 安装Ubuntu之后,使用sudo apt-get install ssh提示: Reading package lists... DoneBuilding dependency tree Reading state information... DonePackage ssh is not 阅读全文
posted @ 2016-08-06 22:14 Julion 阅读(588) 评论(0) 推荐(0)
Hadoop配置SSH
摘要:1、 安装SSH:sudo apt-get install ssh2、 免密码SSH设置:ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys3、 配置其他节点无密码登录本机:... 阅读全文
posted @ 2015-11-11 19:25 Julion 阅读(408) 评论(0) 推荐(0)
HDFS 的常用操作命令
摘要:0. hadoop fs在大部分情况下和hdfs dfs通用1. 创建目录:hadoop fs –mkdir /user2. 上传文件:hadoop fs –put xx.txt /user3. 列出文件目录下所有文件:hadoop fs –ls / (/不能少,不然会找不到文件)4. 查... 阅读全文
posted @ 2015-11-06 15:45 Julion 阅读(233) 评论(0) 推荐(0)