摘要:Oracle数据迁移至HBase操作记录@(HBase)近期需要把Oracle数据库中的十几张表T级别的数据迁移至HBase中,过程中遇到了许多苦难和疑惑,在此记录一下希望能帮到一些有同样需求的兄弟。HBase表设计首先,是根据Oracle的数据规划HBase的表和表结构。 从业务... 阅读全文
posted @ 2016-01-12 21:57 蒋源德 阅读(675) 评论(0) 推荐(0) 编辑
摘要:Hadoop端口一览表@(Hadoop) 端口名 用途 50070 Hadoop Namenode UI端口 50075 Hadoop Datanode UI端口 50090 Hadoop SecondaryNamenode 端口 50030 JobTracke... 阅读全文
posted @ 2016-01-12 17:21 蒋源德 阅读(498) 评论(0) 推荐(0) 编辑
摘要:Hadoop Maven pom文件示例@(Hadoop) 4.0.0 Chinasofti Bigdata 1.0-SNAPSHOT org.apache.hadoop hadoop-hd... 阅读全文
posted @ 2016-01-12 16:17 蒋源德 阅读(740) 评论(0) 推荐(0) 编辑
摘要:HBase设计与开发@(HBase)适合HBase应用的场景 成熟的数据分析主题,查询模式已经确定且不会轻易改变。 传统数据库无法承受负载。 简单的查询模式。 基本概念行健:是hbase表自带的,每个行健对应一条数据。 列族:是创建表时指定的,为列的集合,每个列族作为一... 阅读全文
posted @ 2016-01-12 16:14 蒋源德 阅读(150) 评论(0) 推荐(0) 编辑
摘要:Sqoop操作实践@(Hadoop)Sqoop常用参命令 序号 命令/command 类 说明 1 impor ImportTool 从关系型数据库中导入数据(来自表或者查询语句)到HDFS中 2 export ExportTool 将HDFS中的数据导入到... 阅读全文
posted @ 2016-01-12 16:12 蒋源德 阅读(597) 评论(0) 推荐(0) 编辑