摘要： MapReduce实验——求平均值 要求使用mapreduce统计出每类商品的平均点击次数 重点：输入文件的格式！ 遇到的问题： 运行过程中报出java.lang.ArrayIndexOutOfBoundsException（数组越界）的错误 原因： 一行数据中间的空格格式不正确 /** * Map 阅读全文

摘要： MapReduce实验——去重 根据商品id进行去重，统计用户收藏商品中都有哪些商品被收藏 遇到的问题： 程序运行到mapper的context.write()时就死掉，job.waitForCompletion(true)返回false 原因及解决： linux虚拟机hadoop启动时没有sudo 阅读全文

摘要： 实验内容： 编制一个读单词过程，源程序为一个文件，读取该文件，识别出各个具有独立意义的单词，即基本保留字、标识符、常数、运算符、界符五大类。并依次输出各个单词的内部编码及单词符号自身值。 单词的内部编码如下： 1、保留字：if、int、for、while、do、return、break、contin 阅读全文

摘要： Result文件数据说明： Ip：106.39.41.166,（城市） Date：10/Nov/2016:00:01:02 +0800,（日期） Day：10,（天数） Traffic: 54 ,（流量） Type: video,（类型：视频video或文章article） Id: 8701（视频或 阅读全文

摘要： 实验原理 MapReduce采用的是“分而治之”的思想，把对大规模数据集的操作，分发给一个主节点管理下的各个从节点共同完成，然后通过整合各个节点的中间结果，得到最终结果。简单来说，MapReduce就是”任务的分解与结果的汇总“。 1.MapReduce的工作原理 在分布式计算中，MapReduce 阅读全文

摘要： Server Tomcat v7.0 Server at localhost failed to start 点击Run on Server就会出现上述错误，感觉没有动什么地方Tomcat就突然不能用了，经过从网上寻找解决办法，我发现，原来是不同的servlet使用了相同的@WebServlet标注 阅读全文

摘要： 打开linux系统命令框，输入：ifconfig -a 如图，红圈内的就是linux虚拟机的IP地址。 阅读全文

摘要： Linux虚拟机下的Hadoop安装成功后，下一步就要进行Hadoop链接eclipse了，可以在虚拟机里下载eclipse进行连接，我选择连接Windows下的eclipse，你需要进行一些配置 eclipse配置参考链接：https://blog.csdn.net/windyxue/articl 阅读全文

摘要： 虽然安装上了linux双系统，但是双系统的启动关机问题一直没有解决，我想可能是由于电脑配置不够的问题，所以我放弃了linux双系统，选择了使用Ubuntu虚拟机，发现还是虚拟机使用起来更加方便， 首先就是安装Ubuntu的linux虚拟机，然后就是各种配置，根据教程一步步来就好。 其中，如果你使用h 阅读全文

摘要： 本周开始进行hadoop的安装，起初，我安装了windows版的单机hadoop 学习链接：http://www.mamicode.com/info-detail-2626127.html 但是，看完林子雨老师的《大数据技术原理与应用》的第二章 大数据处理架构Hadoop 的学习指南后，我了解到，h 阅读全文