摘要： 使用sqoop进行将Hive词频统计的结果数据传输到Mysql中。 1.mysql准备接受数据的数据库与表 2.hive准备待传输的数据 3.sqoop进行数据传输 4.mysql查看传输结果 阅读全文

摘要： 一、hive用本地文件进行词频统计 1.准备本地txt文件 2.启动hadoop，启动hive 3.创建数据库，创建文本表 4.映射本地文件的数据到文本表中 5.hql语句进行词频统计交将结果保存到结果表中。 6.查看统计结果 二、hive用HDFS上的文件进行词频统计 1.准备电子书或其它大的文本 阅读全文

摘要： 完成安装hbase： 使用HBase Shell命令 1.任务： 列出HBase所有的表的相关信息，如表名； 在终端打印出指定的表的所有记录数据； 向已经创建好的表添加和删除指定的列族或列； 清空指定的表的所有记录数据； 统计表的行数。 2.关系型数据库中的表和数据（教材P92上)，要求将其转换为适 阅读全文

摘要： 1.词频统计 阅读全文

摘要： 阅读全文

摘要： 阅读全文

摘要： 阅读全文

摘要： 1.了解对比Hadoop不同版本的特性，可以用图表的形式呈现。 Hadoop有以下几种版本： （1）Apache hadoop 的2.0版本，它的模块主要有以下几个： 1）hadoop通用模块，支持其他hadoop模块的通用工具集； 2）Hadoop分布式文件系统，支持对应数据高吞吐量访问的分布式文 阅读全文

摘要： 1.了解微信、微博、小视频每天产生的数据量与数据类型 （1）微信 数据量：【在如今的网络时代，一天中人们花费在手机上的时间是很多的，尤其是年轻人，现在使用微信的使用用户量是巨高的，查询资料可得，微信的月活跃用户从2011年的5千万涨到2019年的11.5亿，每日信息发送量高达400多亿，中午午餐前以 阅读全文