摘要: mysql准备接受数据的数据库与表 hive准备待传输的数据 sqoop进行数据传输 mysql查看传输结果 阅读全文
posted @ 2020-12-11 09:46 LAW666 阅读(54) 评论(0) 推荐(0) 编辑
摘要: 一、hive用本地文件进行词频统计 1.准备本地txt文件 2.启动hadoop,启动hive 3.创建数据库,创建文本表 4.映射本地文件的数据到文本表中 5.hql语句进行词频统计交将结果保存到结果表中。 6.查看统计结果 二、hive用HDFS上的文件进行词频统计 1.准备电子书或其它大的文本 阅读全文
posted @ 2020-12-06 17:11 LAW666 阅读(73) 评论(0) 推荐(0) 编辑
摘要: 1.任务: 列出HBase所有的表的相关信息,例如表名 describe 在终端打印出指定的表的所有记录数据 scan 向已经创建好的表添加和删除指定的列族或列 put 清空指定的表的所有记录数据 delete 统计表的行数 count 2.关系型数据库中的表和数据(教材P92上),要求将其转换为适 阅读全文
posted @ 2020-11-22 21:55 LAW666 阅读(80) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2020-11-05 18:09 LAW666 阅读(90) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2020-10-23 11:31 LAW666 阅读(112) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2020-10-17 15:24 LAW666 阅读(105) 评论(0) 推荐(0) 编辑
摘要: 创建目录为law: 创建表为students; 阅读全文
posted @ 2020-10-10 15:37 LAW666 阅读(113) 评论(0) 推荐(0) 编辑
摘要: 0.14.1 HDFS中更好的校验和。校验和不再存储在并行HDFS文件中,而是由数据节点与块一起直接存储。这对于命名节点更加有效,并且还提高了数据完整性。 管道:MapReduce的C ++ API Eclipse插件,包括HDFS浏览,作业监视等。 HDFS中的文件修改时间。 1.0 安全 HBa 阅读全文
posted @ 2020-09-18 09:47 LAW666 阅读(201) 评论(0) 推荐(0) 编辑
摘要: 微信: 《2018微信年度数据报告》显示,2018年,每天有10.1亿用户登陆微信;日发送微信消息450亿条,较2017年增长18%;每天音视频通话次数达4.1亿次,较去年增长100%。 这份报告还对各年龄段使用者的特征进行了数据分析。例如,55岁以上的活跃用户有6300万人,这些用户早睡早起,日间 阅读全文
posted @ 2020-09-12 00:36 LAW666 阅读(160) 评论(0) 推荐(0) 编辑