2020年7月5日
摘要:
这里的1987.csv和1988.csv只是当年的12月份数据 Select Where Aggregation AggregationWithCombiner SplitByMonthMapper
阅读全文
posted @ 2020-07-05 23:26
ifiwereaboy
阅读(196)
推荐(0)
2020年7月2日
摘要:
为什么成功了得不到数据结果,怀疑输入文件数据有问题,唉···· 今天又尝试了很多回,总结就是用.bz2数据文件时,虽然会运行成功,但是生成的输出文件没有内容,而我也发现map input records=0(不正常啊),而用.txt和.csv数据文件输入时,运行过程就会有如下错误,作业因为任务失败而
阅读全文
posted @ 2020-07-02 23:26
ifiwereaboy
阅读(215)
推荐(0)
摘要:
从这个网址下载数据https://www.transtats.bts.gov/DLSelectFields.asp?TableID=,按照书中选用的字段名称进行勾选,这三个字段名称变化了。
阅读全文
posted @ 2020-07-02 12:34
ifiwereaboy
阅读(193)
推荐(0)
2020年6月7日
摘要:
MapReduce小作业优化之Uber模式 https://blog.csdn.net/qq_44170834/article/details/100628398 有点点烦恼。。。。 输出的文件里面无内容!我直觉是输入文件内容不符合要求,因为我还是用的之前的test.txt文件作为输入文件,里面是从
阅读全文
posted @ 2020-06-07 00:23
ifiwereaboy
阅读(193)
推荐(0)
2020年5月27日
摘要:
决定参照这个教程来安装https://blog.csdn.net/zp8126/article/details/78249741 CentOS6.5 +JDK 1.8环境,用MobaXterm_v11.1操作 1.首先检查jdk安装情况 2.下载hadoop(hadoop版本选择?) 使用rz上传命
阅读全文
posted @ 2020-05-27 13:36
ifiwereaboy
阅读(666)
推荐(0)
2020年5月19日
摘要:
https://www.cnblogs.com/schaepher/p/5561193.html#what
阅读全文
posted @ 2020-05-19 17:16
ifiwereaboy
阅读(210)
推荐(0)
2020年5月18日
摘要:
https://www.cnblogs.com/manmanchanglu/p/12003996.html
阅读全文
posted @ 2020-05-18 22:01
ifiwereaboy
阅读(701)
推荐(0)
摘要:
1.运行python程序时发现缺少numpy库 运行-》cmd输入 pip3 install numpy,下载中 看到Successfully installed numpy-1.18.4显然安装成功了 输入python进入python解释器并输入import numpy as np验证一下,没报错
阅读全文
posted @ 2020-05-18 18:00
ifiwereaboy
阅读(5295)
推荐(0)
2020年5月12日
摘要:
1.linux下面如何使用中文输入法?https://www.jianshu.com/p/5db11c66cbba 2.linux下如何切换到root用户?https://www.cnblogs.com/xinjie10001/p/6295020.html 3.linux下如何截图?
阅读全文
posted @ 2020-05-12 23:21
ifiwereaboy
阅读(198)
推荐(0)
2020年5月7日
摘要:
应老师要求,我要开始下载安装Apache Beam了 Apache Beam下载官网https://beam.apache.org/ 昨天捣鼓到这里(下载解压后····)以后就整个大脑浆糊一样了,虽然粗略扫过了一些经验贴,仍然迷糊。 今天硬着头皮无论如何还是得往下努理解,可能并没有我想象中难呢,毕竟
阅读全文
posted @ 2020-05-07 18:08
ifiwereaboy
阅读(387)
推荐(0)