摘要:
概述 Hbase –Haddop Database 是一个高性能,高可靠性、面向列、可伸缩的分布式存储系统。 Hbase利用HDFS作为文件存储系统,利用MapReduce来处理Hbase的海量数据,利用Zookeeper作为协调工具。 是NoSQL的一种。 数据模型 表(table),是用来存储管理数据的,是在schema声明的时候定义 行健(row key),类似于MySQL中的主键,与... 阅读全文
posted @ 2014-03-12 14:44
向着梦想奋斗
阅读(571)
评论(0)
推荐(0)
摘要:
Zookeeper的角色 Zookeeper集群搭建 要求:服务器集群规模不小于3个节点,各服务器之间系统时间要保持一致! 安装步骤 1、在h1节点解压,目录改名。 tar –zxvf zookeeper-x.tar.gz –C /usr/src cp zookeeper-XX.X /usr/local/zk 2、设置环境变量 export ZOOKEEPER_HOME=/usr/local/... 阅读全文
posted @ 2014-03-12 11:11
向着梦想奋斗
阅读(279)
评论(0)
推荐(0)
摘要:
项目介绍:使用hadoop实现云盘的增删读获取列表功能,hadoop不支持数据修改,特性是一次写入多次读取。主流的网盘也不支持该功能。今天我们用hdfs的FileSystem实现这些操作。 1、上传功能 指定文件的本地路径和hdfs存储路径,通过hadoop提供的IOUtils工具类将流写入到hdfs中。 2、下载功能 指定要访问的hdfs中的文件路径,使用FileSystem的open函数获取H... 阅读全文
posted @ 2014-03-12 11:00
向着梦想奋斗
阅读(1649)
评论(0)
推荐(0)
摘要:
1、检查namenode服务器的是否运行正常,我的问题是没有开启hadoop集群出现的。 2、检查namenode服务器的防火墙是否开放的响应端口,一般内网建议关闭。 阅读全文
posted @ 2014-03-12 10:05
向着梦想奋斗
阅读(3876)
评论(0)
推荐(0)

浙公网安备 33010602011771号