摘要：
错误展示： ./zkServer.sh statusJMX enabled by defaultUsing config: /home/hadoop/zookeeper-3.4.5-cdh5.5.2/bin/../conf/zoo.cfgError contacting service. It is 阅读全文
posted @ 2018-06-18 21:18
蜘蛛侠0
阅读(936)
评论(0)
推荐(0)
摘要：
vim partititon aa 1 2bb 2 22cc 11dd 1ee 99 99 999ff 12 23 123 [hadoop@h201 ~]$ hadoop fs -cat /user/hadoop/output/part-r-0000118/06/10 17:55:02 WARN u 阅读全文
posted @ 2018-06-10 18:00
蜘蛛侠0
阅读(150)
评论(0)
推荐(0)
摘要：
vim topk.txt a 1000b 2000c 90000d 88e 999999f 9998g 13223 /usr/jdk1.7.0_25/bin/javac TopK.java /usr/jdk1.7.0_25/bin/jar cvf tk.jar TopK*class [hadoop@ 阅读全文
posted @ 2018-06-10 16:26
蜘蛛侠0
阅读(201)
评论(0)
推荐(0)
摘要：
*************setup()，此方法被MapReduce框架仅且执行一次，在执行Map任务前，进行相关变量或者资源的集中初始化工作。若是将资源初始化工作放在方法map()中，导致Mapper任务在解析每一行输入时都会进行资源初始化工作，导致重复，程序运行效率不高！cleanup(),此方 阅读全文
posted @ 2018-06-10 15:26
蜘蛛侠0
阅读(171)
评论(0)
推荐(0)
摘要：
HbaseCreate--建表 HbaseInsert--插入 HbaseCI-建表加插入 HbaseScan--查看整个表 HbaseZH--hbase综合使用常用API hbase执行过程不执行MapReduce,直接java编译就可以 /usr/local/jdk1.7.0_25/bin/ja 阅读全文
posted @ 2018-06-10 15:04
蜘蛛侠0
阅读(422)
评论(0)
推荐(0)
摘要：
几个相关类与HBase数据模型之间的对应关系 java类 HBase数据模型 HBaseAdmin 数据库（DataBase) HBaseConfiguration HTable 表（Table) HTableDescriptor 列族（Column Family) Put 列修饰符（Column 阅读全文
posted @ 2018-06-09 22:07
蜘蛛侠0
阅读(1729)
评论(0)
推荐(0)
摘要：
Hive与HBase的整合功能的实现是利用两者本身对外的API接口互相进行通信，相互通信主要是依靠hive_hbase-handler.jar工具类 首先保证版本一致 cd /home/hadoop/hive-1.1.0-cdh5.5.2/lib 查看版本是否一致hbase-server-1.0.0 阅读全文
posted @ 2018-05-22 22:21
蜘蛛侠0
阅读(378)
评论(0)
推荐(0)
摘要：
安装zookeeper[root@a1 hadoop]# tar -zxvf zookeeper-3.4.5-cdh5.5.2.tar.gz[root@a1 hadoop]# cd /usr/local/zookeeper-3.4.5-cdh5.5.2/[root@a1 zookeeper-3.3. 阅读全文
posted @ 2018-05-16 22:33
蜘蛛侠0
阅读(185)
评论(0)
推荐(0)
摘要：
create table Pl(Na varchar2(15), Sh varchar2(15), Mj varchar2(15),Gt int, Sa int,Jt varchar2(20));insert into Pl values('sunhongyu','yiben','jisuanji' 阅读全文
posted @ 2018-05-14 21:49
蜘蛛侠0
阅读(351)
评论(0)
推荐(0)
摘要：
1.hive小文件合并cd hive /conf/hive-default输出合并合并输出小文件。输出时，若是太多小文件，每个小文件会与一个block进行对应，而block存在的意义是为了方便在namenode中存储，那么过多的block将会充斥namenode的表中，待集群规模增大和运行次数增大， 阅读全文
posted @ 2018-05-14 21:48
蜘蛛侠0
阅读(107)
评论(0)
推荐(0)
浙公网安备 33010602011771号