摘要: 一、hive用本地文件进行词频统计 1.准备本地txt文件 2.启动hadoop,启动hive 3.创建数据库,创建文本表 4.映射本地文件的数据到文本表中 5.hql语句进行词频统计交将结果保存到结果表中。 6.查看统计结果 二、hive用HDFS上的文件进行词频统计1.准备电子书或其它大的文本文 阅读全文
posted @ 2020-12-06 12:52 白泽ins 阅读(58) 评论(0) 推荐(0)
摘要: 1.列出Hbase所有的表的相关信息,如表名: 2.在终端打印出指定表的所有记录数据 3.向已经创建好的表添加和删除指定的列族或列 4.清空指定表的所有记录数据 5.统计表的行数 关系型数据库中的表和数据(教材P92上),要求将其转换为适合于HBase存储的表并插入数据。 编程完成以下指定功能(教材 阅读全文
posted @ 2020-11-22 11:40 白泽ins 阅读(95) 评论(0) 推荐(0)
摘要: 阅读全文
posted @ 2020-11-06 14:49 白泽ins 阅读(66) 评论(0) 推荐(0)
摘要: 阅读全文
posted @ 2020-10-23 19:40 白泽ins 阅读(127) 评论(1) 推荐(0)
摘要: HDFS体系结构 写数据 读数据 阅读全文
posted @ 2020-10-17 17:02 白泽ins 阅读(88) 评论(0) 推荐(0)
摘要: 阅读全文
posted @ 2020-10-09 21:02 白泽ins 阅读(100) 评论(0) 推荐(0)
摘要: 1.了解对比Hadoop不同版本的特性,可以用图表的形式呈现。 Apache Hadoop版本分为两代,第一代Hadoop称为Hadoop1.0,第二代Hadoop称为Hadoop2.0。第一代Hadoop包含0.20.x、0.21.x、0.22.x三大版本,其中,0.20.x最后演化成1.0.x, 阅读全文
posted @ 2020-09-18 16:35 白泽ins 阅读(252) 评论(0) 推荐(0)
摘要: 1.了解微信、微博、小视频每天产生的数据量与数据类型 微信:微信消息,视频通话,文章阅读,微信小视频,微信小游戏,微信支付,小程序等大量数据的产生。 微博:文章阅读、浏览、评论、转发,视频观看,链接点击,图片传输。 小视频:每天产生的小视频数不胜数,数据消耗已经成为了如今最大的数据产生了。 2.选择 阅读全文
posted @ 2020-09-11 20:17 白泽ins 阅读(160) 评论(0) 推荐(0)