牵牛花

2017年6月1日

摘要：创建分桶的表 create table t_buck(id int ,name string) clustered by (id ) sorted by (id) into 4 buckets ; 分桶表的数据不是直接导入（load）的，是从其他表里面查出来插入的，插入时会在语句中加入约束的语句。阅读全文

posted @ 2017-06-01 16:03 牵牛花阅读(1701) 评论(0) 推荐(0)

hive入门

摘要：连接登录 !connect jdbc:hive2://localhost:10000Connecting to jdbc:hive2://localhost:10000Enter username for jdbc:hive2://localhost:10000: hadoopEnter pass 阅读全文

posted @ 2017-06-01 10:45 牵牛花阅读(304) 评论(0) 推荐(0)

2017年5月31日

hive beeline 的server启动与连接

摘要：启动hiveServer2 启动beeline之后连接 !connect jdbc:hive2://localhost:10000/default 启动的时候连接 /beeline -u jdbc:hive2://localhost:10000 -n hadoop http://blog.csdn 阅读全文

posted @ 2017-05-31 17:18 牵牛花阅读(10688) 评论(0) 推荐(1)

Hadoop相关资料

摘要： http://blog.csdn.net/skywalker_only/article/details/40650427 阅读全文

posted @ 2017-05-31 17:16 牵牛花阅读(127) 评论(0) 推荐(0)

2017年5月27日

map端join

摘要： package my.hadoop.hdfs.mapreduceJoin; import java.io.BufferedReader; import java.io.FileInputStream; import java.io.IOException; import java.io.InputStreamReader; import java.net.URI; import java.ne... 阅读全文

posted @ 2017-05-27 15:36 牵牛花阅读(730) 评论(0) 推荐(0)

2017年5月26日

为什么jdbc中的resultset只能取一次去第二次就报错了

摘要：引用 6 楼的回复: 好吧各位，应该写getInt(1)但是我要问的是为什么第二次用会出错啊，好古老的一个问题。。。第二次出错的原因，是因为你创建Statement的时候，没有指定结果集（游标）模式！createStatement(int resultSetType, int resultSet 阅读全文

posted @ 2017-05-26 23:17 牵牛花阅读(443) 评论(0) 推荐(0)

mapreduce中reduce中的迭代器只能调用一次。其实迭代器就只能调用一次

摘要：亲测，只能调用一次，如果想想在一次reduce重复使用迭代器中的数据，得先取出来放在list中然后在从list中取出来！！多次读取reduce函数中迭代器的数据根本原因是迭代器本来就只能调用一次，因为便利完之后指针就移动到最后了，再使用iter.hasNext()肯定烦返回的是false啊。由于r 阅读全文

posted @ 2017-05-26 23:02 牵牛花阅读(1435) 评论(0) 推荐(0)

Name node is in safe mode.

摘要：遇到两次了，都是启动之后太早执行mapreduce了，过了一会执行就可以了阅读全文

posted @ 2017-05-26 15:02 牵牛花阅读(196) 评论(0) 推荐(0)

mapreduce 查找共同好友

摘要：一种错误的理解就是E在A的还有列表中，那么A也在E的列表，且A和E同时有的好友才是共同好友，如果按照这个观点思考下去就简单了，但是这个是错的，因为A-E：B，C，D 这种不不满足正确的理解是求人与人之间的共同好友，人与人之间是否是同一个好友，是否在彼此的好友列表无关。如果这个程序不用mapre 阅读全文

posted @ 2017-05-26 14:14 牵牛花阅读(1658) 评论(0) 推荐(0)

mapreduce学习资料

摘要： http://blog.csdn.net/tianjun2012/article/category/6794531 http://blog.csdn.net/tianjun2012/article/details/62444281 阅读全文

posted @ 2017-05-26 12:10 牵牛花阅读(167) 评论(0) 推荐(0)

公告