摘要：
client通过DistributedFileSystem对象调用create()方法创建文件，实际上通过RPC调用了NameNode的方法。NameNode收到client的请求之后，执行各种检查（1.确认要传文件目前在HDFS上不存在，2.client具有写的权限）如果通过则会为新文件创建一条记... 阅读全文
posted @ 2015-06-02 22:46 LuckyBill 阅读(146) 评论(0) 推荐(0)
2015年6月2日
摘要：
CentOS系统自带的更新源的速度实在是慢，为了让CentOS6使用速度更快的YUM更新源，可以选择163（网易）的更新源。1.下载repo文件wget http://mirrors.163.com/.help/CentOS6-Base-163.repo2.备份并替换系统的repo文件[root@l... 阅读全文
posted @ 2015-06-02 22:45 LuckyBill 阅读(119) 评论(0) 推荐(0)
摘要：
数据迁移工具,可以和RDBMS相互迁移数据需要先将db driver copy to sqoop lib dir注意： sqoop是以mapreduce的方式来运行任务的，用hdfs来存储数据的。所以依赖NameNode和ResourceManager，只要机器上配置了这两个就可以正常运行，程序运行... 阅读全文
posted @ 2015-06-02 22:42 LuckyBill 阅读(131) 评论(0) 推荐(0)
摘要：
进入hbase命令行./hbase shell显示hbase中的表list创建user表，包含info、data两个列族create 'user', 'info1', 'data1'create 'user', {NAME => 'info', VERSIONS => '3'}向user表中插入信息... 阅读全文
posted @ 2015-06-02 22:40 LuckyBill 阅读(123) 评论(0) 推荐(0)
摘要：
HBase - Hadoop Databasehbase的设计思想来自于google的bigtable主键：Row Key主键是用来检索记录的主键，访问Hbase table 中的行，只有三种方式通过单个Row Key 访问通过Row Key 的range全表扫描列族：Column Family列族... 阅读全文
posted @ 2015-06-02 22:39 LuckyBill 阅读(136) 评论(0) 推荐(0)
摘要：
HBase - Hadoop Databasehbase的设计思想来自于google的bigtable主键：Row Key主键是用来检索记录的主键，访问Hbase table 中的行，只有三种方式通过单个Row Key 访问通过Row Key 的range全表扫描列族：Column Family列族... 阅读全文
posted @ 2015-06-02 22:39 LuckyBill 阅读(142) 评论(0) 推荐(0)
浙公网安备 33010602011771号