酱汁怪兽

2021年7月5日

摘要： package com.imooc.bigdata.hadoop.hdfs; /* * 使用HDFS API完成WordCount统计 * * 需求：统计HDFS上的文件的词频统计，然后将统计结果输出到HDFS * * 功能拆解： * 1）读取HDFS上的文件 ==》 HDFS API * 2）阅读全文

posted @ 2021-07-05 16:26 酱汁怪兽阅读(71) 评论(0) 推荐(0)

使用Java Api之删除文件

摘要： package com.imooc.bigdata.hadoop.hdfs; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.*; import org.apache.hadoop.io.IOUtils 阅读全文

posted @ 2021-07-05 14:52 酱汁怪兽阅读(263) 评论(0) 推荐(0)

使用Java API之查看文件块信息

摘要： package com.imooc.bigdata.hadoop.hdfs; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.*; import org.apache.hadoop.io.IOUtils 阅读全文

posted @ 2021-07-05 14:42 酱汁怪兽阅读(169) 评论(0) 推荐(0)

使用Java API之递归方式列出目标文件夹中的所有内容

摘要： package com.imooc.bigdata.hadoop.hdfs; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.*; import org.apache.hadoop.io.IOUtils 阅读全文

posted @ 2021-07-05 14:15 酱汁怪兽阅读(175) 评论(0) 推荐(0)

使用Java API之列出目标文件夹下的所有内容

摘要： package com.imooc.bigdata.hadoop.hdfs; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FSDataOutputStream; import org.apache. 阅读全文

posted @ 2021-07-05 10:33 酱汁怪兽阅读(135) 评论(0) 推荐(0)

2021年7月2日

使用Java API之带进度条上传大文件（我觉得不重要）

摘要： 1 package com.imooc.bigdata.hadoop.hdfs; 2 3 import org.apache.hadoop.conf.Configuration; 4 import org.apache.hadoop.fs.FSDataOutputStream; 5 import o 阅读全文

posted @ 2021-07-02 16:40 酱汁怪兽阅读(275) 评论(0) 推荐(0)

使用Java API之拷贝本地主机文件至HDFS文件系统

摘要：问题描述：（1）在Xshell中，Windows系统中cat命令不起作用。解决措施：（1）cat是Linux系统专有的命令，在Dos里没有cat这个命令。用Windows批处理命令type代替cat。 1 package com.imooc.bigdata.hadoop.hdfs; 2 3 i 阅读全文

posted @ 2021-07-02 15:58 酱汁怪兽阅读(410) 评论(0) 推荐(0)

使用Java API之文件重命名

摘要： 1 package com.imooc.bigdata.hadoop.hdfs; 2 3 import org.apache.hadoop.conf.Configuration; 4 import org.apache.hadoop.fs.FSDataOutputStream; 5 import o 阅读全文

posted @ 2021-07-02 15:28 酱汁怪兽阅读(335) 评论(0) 推荐(0)

使用Java API之副本系数深度剖析

摘要：问题描述：（1）使用Java API创建HDFS文件并写入内容的副本系数为3 （2）使用命令上传至HDFS中的文件副本数为1：举例[hadoop@hadoop000 software]$ hadoop fs -put jdk-8u91-linux-x64.tar.gz / 问题回答：（1）使用J 阅读全文

posted @ 2021-07-02 15:08 酱汁怪兽阅读(133) 评论(0) 推荐(0)

2021年7月1日

使用Java API创建HDFS文件并写入内容

摘要： 1 package com.imooc.bigdata.hadoop.hdfs; 2 3 import org.apache.hadoop.conf.Configuration; 4 import org.apache.hadoop.fs.FSDataOutputStream; 5 import o 阅读全文

posted @ 2021-07-01 17:23 酱汁怪兽阅读(3072) 评论(0) 推荐(0)

公告