2017年9月13日

统计apachelog各访问状态个数(使用MapReduce)

摘要： 统计日志文件中各访问状态的个数. 1.将日志数据上传到hdfs 路径 /mapreduce/data/apachelog/in 中 内容如下 2.代码 3.将代码生成jar包 4.调用 EFdeMacBook-Pro:hadoop-2.8.0 FengZhen$ hadoop jar /Users/ 阅读全文

posted @ 2017-09-13 15:44 嘣嘣嚓 阅读(380) 评论(0) 推荐(0)

使用 sqoop 将mysql数据导入到hdfs（import）

摘要： Sqoop 将mysql 数据导入到hdfs(import) 1.创建mysql表 插入数据 2.hive 建表 3.使用sqoop将mysql数据导入到hdfs --delete-target-dir:如果目标目录存在则删除。 可在hdfs看到传入的数据 可在hive中查看数据。 使用sqoop将 阅读全文

posted @ 2017-09-13 11:22 嘣嘣嚓 阅读(1103) 评论(0) 推荐(0)

使用 sqoop 将 hive 数据导出到 mysql (export)

摘要： 使用sqoop将hive中的数据传到mysql中 1.新建hive表 2.给hive表添加数据 数据如下1,fz,132,test,133,dx,18 3.将文件上传到hdfs对应目录下 上传成功进入hive 命令行可查看到数据 4.在mysql新建表，表结构和hive中的相同 5.使用sqoop传 阅读全文

posted @ 2017-09-13 10:38 嘣嘣嚓 阅读(7018) 评论(0) 推荐(0)

导航