摘要：
使用sqoop进行将Hive 词频统计的结果数据传输到Mysql中。 1.mysql准备接受数据的数据库与表 2.hive准备待传输的数据 3.sqoop进行数据传输 4.mysql查看传输结果 先用测试文件做实验，成功后将电子书的统计结果传输出mysql中。 阅读全文
摘要：
一、hive用本地文件进行词频统计 1.准备本地txt文件 2.启动hadoop，启动hive 3.创建数据库，创建文本表 4.映射本地文件的数据到文本表中 5.hql语句进行词频统计交将结果保存到结果表中。 6.查看统计结果 二、hive用HDFS上的文件进行词频统计 1.准备电子书或其它大的文本 阅读全文
摘要：
下载喜欢的电子书或大量文本数据，并保存在本地文本文件中 编写map与reduce函数 本地测试map与reduce 将文本数据上传至HDFS上 阅读全文
摘要：
本地文件系统创建一个文件，输入带姓名学号信息。 查看新建文件所在目录 查看新建文件内容 将此文件上传到HDFS文件系统上的用户目录 HDFS上查看相应目录 HDFS上查看文件内容 HDFS上查看文件大小 删除本地1步骤创建的文件 将HDFS上的文件下载到本地 查看本地文件目录 阅读全文
摘要：
1.HDFS体系结构 2.HDFS工作原理与流程。 阅读全文
摘要：
1. 熟悉 Linux系统的使用 （1）上面完成了Linux系统的安装以后，如果读者是初次使用Linux系统，请熟悉一下Linux常用命令，参考链接：Linux系统的常用命令 **操作过程截图提交作业。 （2）如果在上面步骤中，读者采用了虚拟机的方式安装了Linux系统，可以学习一下如何在Windo 阅读全文
摘要：
1.了解对比Hadoop不同版本的特性，可以用图表的形式呈现。 DKhadoop发行版：成了整个hadoop生态系统的全部组件并且做了深度优化，重新编译成了一个完整的更高性能的大数据通用计算平台，实现了各部件的有机协调。 cloudera发行版：CDH是Cloudera的hadoop发行版，完全开源 阅读全文
摘要：
1.了解微信、微博、小视频每天产生的数据量与数据类型。 2018年，每天有10.1亿用户登陆微信；日发送微信消息450亿条，较2017年增长18%；每天音视频通话次数达4.1亿次，较去年增长100%。 2.选择一个你感兴趣的领域应用数据思维进行分析决策的案例。 在销售行业中，大数据可以帮助我们分析目 阅读全文