摘要：
SQOOP是用于对数据进行导入导出的。 (1)把MySQL、Oracle等数据库中的数据导入到HDFS、Hive、HBase中 (2)把HDFS、Hive、HBase中的数据导出到MySQL、Oracle等数据库中 (3)导入导出的事务是以Mapper任务为单位。1、sqoop的安装步骤 1.... 阅读全文
posted @ 2015-02-28 16:55
/HOME/北北
阅读(328)
评论(0)
推荐(0)
摘要：
zookeeper服务器集群规模不小于3个节点，要求各服务器之间系统时间要保持一致。1、解压zookeeper-3.4.5.tar.gz 文件 执行命令：tar -zxvf zookeeper-3.4.5.tar.gz2、重命名文件夹 执行命令：mv zookeeper-3.4.5/ zk3、设... 阅读全文
posted @ 2015-02-28 15:44
/HOME/北北
阅读(218)
评论(0)
推荐(0)
摘要：
1、Hive 1.1在hadoop生态圈中属于数据仓库的角色。他能够管理hadoop中的数据，同时可以查询hadoop中的数据。 本质上讲，hive是一个SQL解析引擎。Hive可以把SQL查询转换为MapReduce中的job来运行。 hive有一套映射工具，可以把SQL转换为MapReduce中... 阅读全文
posted @ 2015-02-28 15:41
/HOME/北北
阅读(624)
评论(0)
推荐(0)
摘要：
hbase的机群搭建过程集群结构，主节点(hmaster)是hadoop，从节点(region server)是hadoop1和hadoop21、解压缩、重命名、设置环境变量 export HBASE_HOME=/home/hadoop/app/hbase export PATH=.:$HADOO... 阅读全文
posted @ 2015-02-28 15:37
/HOME/北北
阅读(153)
评论(0)
推荐(0)
摘要：
1：配置静态IP地址重启网卡命令：service network restart验证：ifconfig2：修改主机名称 2.1、修改当前会话中的主机名命令：hostname hadoop 2.2、修改配置文件中的主机名：vi /etc/sysconfig/network验证：重启机器后查看主机名... 阅读全文
posted @ 2015-02-28 15:32
/HOME/北北
阅读(624)
评论(0)
推荐(0)
摘要：
给hadoop赋予sudo权限进入超级用户模式.也就是输入"su -",系统会让你输入超级用户密码,输入密码后就进入了超级用户模式.添加文件的写权限.也就是输入命令"chmod u+w /etc/sudoers".编辑/etc/sudoers文件.也就是输入命令"vim /etc/sudoers",... 阅读全文
posted @ 2015-02-28 15:30
/HOME/北北
阅读(507)
评论(0)
推荐(0)
摘要：
集群机器准备机器名机器IP用途hadoop192.168.147.100namenode、secondaryNamenode、JobTracterhadoop1192.168.147.101datanode、tacktracterhadoop2192.168.147.102datanode、tack... 阅读全文
posted @ 2015-02-28 14:57
/HOME/北北
阅读(466)
评论(0)
推荐(0)
摘要：
1、机器准备，职责划分如下：机器名称IP地址NameNodeDataNodeJournalNodeZooKeeperZKFCHA-Cluster1HA-Cluster2Resource ManagerNode Managerhadoop01192.168.147.101Active√√nn1√had... 阅读全文
posted @ 2015-02-28 11:45
/HOME/北北
阅读(409)
评论(0)
推荐(0)
浙公网安备 33010602011771号