桃子味的小朋友

摘要： 1.安装虚拟机 下载 01 VirtualBox-6.1.16-140961-Win.exe，并安装完成。 2.安装Linux操作系统 下载02 ubuntukylin-16.04-desktop-amd64.iso，并完成安装。 在线安装教程http://dblab.xmu.edu.cn/blog 阅读全文

摘要： 一.安装Hive 1.下载解压重命名权限 2.配置环境变量 $HIVE_HOME 3.修改Hive配置文件 gedit 4.配置mysql驱动 下载合适版本的mysql jar包，拷贝到/usr/local/hive/lib目录下 ls 在mysql新建hive数据库 show databases; 阅读全文

摘要： WordCount程序任务： 程序 WordCount 输入 一个包含大量单词的文本文件 输出 文件中每个单词及其出现次数（频数）， 并按照单词字母顺序排序， 每个单词和其频数占一行，单词和频数之间有间隔 1.用你最熟悉的编程环境，编写非分布式的词频统计程序。 读文件 分词（text.split列表 阅读全文

摘要： 1.理解HBase表模型及四维坐标：行键、列族、列限定符和时间戳。 2.启动HDFS，启动HBase，进入HBaseShell命令行。 3.列出HBase中所有的表信息list 4.创建表create 5.查看表详情desc 6.插入数据put 7.查看表数据scan,get 8.多版本实验：修改列 阅读全文

摘要： 1.下载压缩文件 2.解压 3.修改文件夹名 4.修改文件夹权限 5.配置环境变量 输入gredit ~/.bashrc命令进入bashrc文件，输入 export HBASE_HOME=/usr/local/hbaseexport PATH=$PATH:$HBASE_HOME/bin 保存退出再进 阅读全文

摘要： 一、在Ubuntu系统中安装和配置Eclipse 二、利用hadoop 的java api，向HDFS写一个文件。写入内容含自己的姓名学号信息。 三、从HDFS读取一个文件的内容并显示。 阅读全文

摘要： 1.用图与自己的话，简要描述Hadoop起源与发展阶段。 从与谷歌系统的关系，关键时间节点，1.x,2.x与3.x的区别，不同公司发行版本等方面来讲。 （1）Hadoop最早起源于lucene下的Nutch。Nutch的设计目标是构建一个大型的全网搜索引擎，包括网页抓取、索引、查询等功能，但随着抓取 阅读全文

摘要： （一）熟悉常用的Linux操作 请按要求上机实践如下linux基本命令。 cd命令：切换目录 （1）切换到目录 /usr/local （2）去到目前的上层目录 （3）回到自己的主文件夹 ls命令：查看文件与目录 （4）查看目录/usr下所有的文件 mkdir命令：新建新目录 （5）进入/tmp目录， 阅读全文

摘要： 1.为什么产生大数据技术？ 从技术角度来看，大数据简而言之:它是利用一定的技术，对海量的不同类型的数据进行采集、存储、分析、处理，最终能促进政府作出科学决策、促进企业实现经济效率最大化的一科学技术手段。 产生大数据技术原因不仅在于数据爆炸性的增长，数据作为资产其价值得到人们的认可而被重视且处理数据的 阅读全文