上一页 1 ··· 3 4 5 6 7 8 9 下一页
  2020年7月5日
摘要: 这里的1987.csv和1988.csv只是当年的12月份数据 Select Where Aggregation AggregationWithCombiner SplitByMonthMapper 阅读全文
posted @ 2020-07-05 23:26 ifiwereaboy 阅读(196) 评论(0) 推荐(0)
  2020年7月2日
摘要: 为什么成功了得不到数据结果,怀疑输入文件数据有问题,唉···· 今天又尝试了很多回,总结就是用.bz2数据文件时,虽然会运行成功,但是生成的输出文件没有内容,而我也发现map input records=0(不正常啊),而用.txt和.csv数据文件输入时,运行过程就会有如下错误,作业因为任务失败而 阅读全文
posted @ 2020-07-02 23:26 ifiwereaboy 阅读(215) 评论(0) 推荐(0)
摘要: 从这个网址下载数据https://www.transtats.bts.gov/DLSelectFields.asp?TableID=,按照书中选用的字段名称进行勾选,这三个字段名称变化了。 阅读全文
posted @ 2020-07-02 12:34 ifiwereaboy 阅读(193) 评论(0) 推荐(0)
  2020年6月7日
摘要: MapReduce小作业优化之Uber模式 https://blog.csdn.net/qq_44170834/article/details/100628398 有点点烦恼。。。。 输出的文件里面无内容!我直觉是输入文件内容不符合要求,因为我还是用的之前的test.txt文件作为输入文件,里面是从 阅读全文
posted @ 2020-06-07 00:23 ifiwereaboy 阅读(193) 评论(0) 推荐(0)
  2020年5月27日
摘要: 决定参照这个教程来安装https://blog.csdn.net/zp8126/article/details/78249741 CentOS6.5 +JDK 1.8环境,用MobaXterm_v11.1操作 1.首先检查jdk安装情况 2.下载hadoop(hadoop版本选择?) 使用rz上传命 阅读全文
posted @ 2020-05-27 13:36 ifiwereaboy 阅读(666) 评论(0) 推荐(0)
  2020年5月19日
摘要: https://www.cnblogs.com/schaepher/p/5561193.html#what 阅读全文
posted @ 2020-05-19 17:16 ifiwereaboy 阅读(210) 评论(0) 推荐(0)
  2020年5月18日
摘要: https://www.cnblogs.com/manmanchanglu/p/12003996.html 阅读全文
posted @ 2020-05-18 22:01 ifiwereaboy 阅读(701) 评论(0) 推荐(0)
摘要: 1.运行python程序时发现缺少numpy库 运行-》cmd输入 pip3 install numpy,下载中 看到Successfully installed numpy-1.18.4显然安装成功了 输入python进入python解释器并输入import numpy as np验证一下,没报错 阅读全文
posted @ 2020-05-18 18:00 ifiwereaboy 阅读(5295) 评论(0) 推荐(0)
  2020年5月12日
摘要: 1.linux下面如何使用中文输入法?https://www.jianshu.com/p/5db11c66cbba 2.linux下如何切换到root用户?https://www.cnblogs.com/xinjie10001/p/6295020.html 3.linux下如何截图? 阅读全文
posted @ 2020-05-12 23:21 ifiwereaboy 阅读(198) 评论(0) 推荐(0)
  2020年5月7日
摘要: 应老师要求,我要开始下载安装Apache Beam了 Apache Beam下载官网https://beam.apache.org/ 昨天捣鼓到这里(下载解压后····)以后就整个大脑浆糊一样了,虽然粗略扫过了一些经验贴,仍然迷糊。 今天硬着头皮无论如何还是得往下努理解,可能并没有我想象中难呢,毕竟 阅读全文
posted @ 2020-05-07 18:08 ifiwereaboy 阅读(387) 评论(0) 推荐(0)
上一页 1 ··· 3 4 5 6 7 8 9 下一页