摘要： 一.安装Hive 下载解压重命名权限 配置环境变量 $HIVE_HOME 修改Hive配置文件 gedit 配置mysql驱动 下载合适版本的mysql jar包，拷贝到/usr/local/hive/lib目录下 ls 在mysql新建hive数据库 show databases; 配置mysql 阅读全文

摘要： WordCount程序任务： 程序 WordCount 输入 一个包含大量单词的文本文件 输出 文件中每个单词及其出现次数（频数）， 并按照单词字母顺序排序， 每个单词和其频数占一行，单词和频数之间有间隔 1.用你最熟悉的编程环境，编写非分布式的词频统计程序。 读文件 分词（text.split列表 阅读全文

摘要： 1.理解HBase表模型及四维坐标：行键、列族、列限定符和时间戳。 2.启动HDFS，启动HBase，进入HBaseShell命令行。 3.列出HBase中所有的表信息list 4.创建表create 5.查看表详情desc 6.插入数据put 7.查看表数据scan 尝试分别用MySQL和HBas 阅读全文

摘要： 1.下载压缩文件 使用FileZilla上传文件 2.解压 3.修改文件夹名 4.修改文件夹权限 5.配置环境变量 6.伪分布式配置文件 7.启动HDFS，启动Hbase 8.进入shell界面 9.停止Hbase，停止HDFS运行 阅读全文

摘要： 一、在Ubuntu系统中安装和配置Eclipse 通过FlieZilla传输eclipse安装包 解压安装包 启动eclipse 二、利用hadoop 的java api，向HDFS写一个文件。 创建java project 创建java class 代码 写入writeflie.java 启动hd 阅读全文

摘要： 1.用图与自己的话，简要描述Hadoop起源与发展阶段。 Hadoop是一个对海量数据存储和海量数据分析计算的分布式系统，是Apache软件基金会下用Java语言开发的一个开源分布式计算平台。实现在大量计算机组成的集群中对海量数据进行分布式计算。适合大数据的分布式存储和计算平台。 hadoop的发展 阅读全文

摘要： （1）切换到目录 /usr/local （2）去到目前的上层目录 （3）回到自己的主文件夹 （4）查看目录/usr下所有的文件 （5）进入/tmp目录，创建一个名为a的目录,并查看有多少目录存在 （6）创建目录a1/a2/a3/a4 （7）将上例创建的目录a（/tmp下面）删除 （8）删除目录a1/ 阅读全文

摘要： 1.安装虚拟机 下载 01 VirtualBox-6.1.16-140961-Win.exe，并安装完成。 2.安装Linux操作系统 下载02 ubuntukylin-16.04-desktop-amd64.iso，并完成安装。 在线安装教程http://dblab.xmu.edu.cn/blog 阅读全文

摘要： 1.为什么产生大数据技术？ 现代社会是一个经济科技高速发展的社会。在这样的一个社会里，不光是金钱的往来，更多的是各种信息的交换与人之间的交流。大数据是中国世界高科技时代的产物。大数据技术不仅对社会、经济、生活产生了巨大的影响，更为我们人类看待世界有了新的方法。大数据是人们获取新知识，创造新价值的源泉 阅读全文