摘要：
一.安装Hive 下载解压重命名权限 2.配置环境变量 $HIVE_HOME 3.修改Hive配置文件 gedit 4.配置mysql驱动，下载合适版本的mysql jar包，拷贝到/usr/local/hive/lib目录下 ls 5.在mysql新建hive数据库 show databases; 阅读全文
摘要：
WordCount程序任务： 程序 WordCount 输入 一个包含大量单词的文本文件 输出 文件中每个单词及其出现次数（频数）， 并按照单词字母顺序排序， 每个单词和其频数占一行，单词和频数之间有间隔 1.用你最熟悉的编程环境，编写非分布式的词频统计程序。 读文件 分词（text.split列表 阅读全文
摘要：
1.理解HBase表模型及四维坐标：行键、列族、列限定符和时间戳。 2.启动HDFS，启动HBase，进入HBaseShell命令行。 （1）启动HDFS，启动HBase （2）进入HBaseShell命令行 3.列出HBase中所有的表信息list 4.创建表create 5.查看表详情desc 阅读全文
摘要：
1.下载压缩文件 2.解压 3.修改文件夹名 4.修改文件夹权限 将权限分配给hadoop用户 查看hbase版本 5.配置环境变量 6.伪分布式配置文件 (1）配置/usr/local/hbase/conf/hbase-env.sh （2）配置/usr/local/hbase/conf/hbase 阅读全文
摘要：
一、在Ubuntu系统中安装和配置Eclipse 二、利用hadoop 的java api，向HDFS写一个文件。 三、从HDFS读取一个文件的内容 阅读全文
摘要：
1.用图与自己的话，简要描述Hadoop起源与发展阶段。 Hadoop是道格·卡丁（Doug Cutting）创建的，Hadoop起源于开源网络搜索引擎Apache Nutch，后者本身也是Lucene项目的一部分。Nutch项目面世后，面对数据量巨大的网页显示出了架构的灵活性不够。当时正好借鉴了谷 阅读全文
摘要：
（一）熟悉常用的Linux操作 请按要求上机实践如下linux基本命令。 cd命令：切换目录 （1）切换到目录 /usr/local （2）去到目前的上层目录 （3）回到自己的主文件夹 ls命令：查看文件与目录 （4）查看目录/usr下所有的文件 mkdir命令：新建新目录 （5）进入/tmp目录， 阅读全文
环境搭建
摘要：
一，为什么产生大数据技术？ 1.大数据的起源是互联网，随着智能制造的推进，人工智能技术也得到了快速的发展，而大数据的最大应用就体现在人工智能技术中，大数据强调的不是因果关系，而是关联关系。 2.技术突破来源于实际的产品需求，如果将大数据比作一种产业，那么降低存储成本，提升运行速度和计算速度，以及对数 阅读全文