中药红

摘要： 1.mysql准备接受数据的数据库与表 2.hive准备待传输的数据 3.sqoop进行数据传输 4.mysql查看传输结果 阅读全文

摘要： 一、hive用本地文件进行词频统计 1.准备本地txt文件 2.启动hadoop，启动hive 3.创建数据库，创建文本表 4.映射本地文件的数据到文本表中 5.hql语句进行词频统计交将结果保存到结果表中。 6.查看统计结果 二、hive用HDFS上的文件进行词频统计 1.准备电子书或其它大的文本 阅读全文

摘要： 使用HBase Shell命令 或 使用HBase Java API完成： 1.任务： (1)列出HBase所有的表的相关信息，例如表名； (2)在终端打印出指定的表的所有记录数据； (3)向已经创建好的表添加和删除指定的列族或列； (4)清空指定的表的所有记录数据； (5)统计表的行数。 2.关系 阅读全文

摘要： 1、下载喜欢的电子书或大量文本数据，并保存在本地文本文件中 wget http://www.gutenberg.org/files/1342/1342-0.txt 2、编写map与reduce函数 gedit mapper.py gedit reduce.py 3、本地测试map与reduce ge 阅读全文

摘要： 1.本地文件系统创建一个文件，输入带姓名学号信息。2.查看新建文件所在目录3.查看新建文件内容 4.将此文件上传到HDFS文件系统上的用户目录5.HDFS上查看相应目录6.HDFS上查看文件内容7.HDFS上查看文件大小 8。删除本地1步骤创建的文件 9.将HDFS上的文件下载到本地10.查看本地文 阅读全文

摘要： 1.用自己的图，描述HDFS体系结构、工作原理与流程。 2.伪分布式安装Hadoop。 阅读全文

摘要： （1）上面完成了Linux系统的安装以后，如果读者是初次使用Linux系统，请熟悉一下Linux常用命令 （2）在Ubuntu下安装MySQL及其常用操作 阅读全文

摘要： 1.了解对比Hadoop不同版本的特性，可以用图表的形式呈现。 发行版本 功能特点 DKhadoop发行版 DKhadoop发行版：有效的集成了整个HADOOP生态系统的全部组件，并深度优化，重新编译为一个完整的更高性能的大数据通用计算平台，实现了各部件的有机协调。因此DKH相比开源的大数据平台，在 阅读全文

摘要： 1.了解微信、微博、小视频每天产生的数据量与数据类型。 目前微博每天可能产生4亿+的数据量，数据类型为string，微信每天可能有450亿的消息发送，数据类型为string，小视频每天有上千万的小视频，数据类型为string 2.选择一个你感兴趣的领域应用数据思维进行分析决策的案例。 https:/ 阅读全文