会喷水的海参

摘要： 使用sqoop进行将Hive 词频统计的结果数据传输到Mysql中 测试： 1.mysql准备接受数据的数据库与表 show databases; create database if not exists wc; use wc; show tables; create table if not e 阅读全文

摘要： 一、hive用本地文件进行词频统计 1.准备本地txt文件 mkdir wc cd wc echo "hadoop hbase" > f1.txt echo "hadoop hive" > f2.txt 2.启动hadoop，启动hive start-all.sh hive 3.创建数据库，创建文本 阅读全文

摘要： 使用HBase Shell命令 或 使用HBase Java API完成： 1.任务： 列出HBase所有的表的相关信息，例如表名； 在终端打印出指定的表的所有记录数据； 向已经创建好的表添加和删除指定的列族或列； 清空指定的表的所有记录数据； 统计表的行数。 2.关系型数据库中的表和数据（教材P9 阅读全文

摘要： 一、词频统计 1. 下载喜欢的电子书或大量文本数据，并保存在本地文本文件中 2. 编写map与reduce函数 3. 本地测试map与reduce 4. 将文本数据上传至HDFS上 5. 用hadoop streaming提交任务 6. 查看运行结果 7. 计算结果取回到本地 二、气象数据分析 1. 阅读全文

摘要： 本地文件系统创建一个文件，输入带姓名学号信息。 查看新建文件所在目录 查看新建文件内容 4.将此文件上传到HDFS文件系统上的用户目录 5.HDFS上查看相应目录 6.HDFS上查看文件内容 7.HDFS上查看文件大小 8.删除本地1步骤创建的文件 9.将HDFS上的文件下载到本地 10.查看本地文 阅读全文

摘要： HDFS体系结构： HDFS写入数据流程： HDFD读取数据流程： 安装Hadoop： 阅读全文

摘要： 1. 熟悉 Linux系统的使用 （1）上面完成了Linux系统的安装以后，如果读者是初次使用Linux系统，请熟悉一下Linux常用命令，参考链接：Linux系统的常用命令 **操作过程截图提交作业。 （2）如果在上面步骤中，读者采用了虚拟机的方式安装了Linux系统，可以学习一下如何在Windo 阅读全文

摘要： 1.了解对比Hadoop不同版本的特性，可以用图表的形式呈现。 Hadoop版本 特性 1.0 安全HBase（append / hsynch / hflush和安全性）webhdfs（全面支持安全性）性能增强了对HBase对本地文件的访问其他性能增强，错误修复和功能 2.0 HDFS HA for 阅读全文