2020年8月15日
HDFS数据流程（读写）
摘要： 上传的操作流程： 1、客户端读取文件之后有了filesystem 2、之后客户机申请上传发起请求。Namenode进行审核（此路径是否被其他文件占用或者有没有权限）告诉客户机能否上传 3、客户机对文件进行逻辑切分。之后客户机开一个FSDataoutputStream之后请求上传第一个block。 4 阅读全文
posted @ 2020-08-15 21:20 喜欢爬的孩子 阅读(231) 评论(0) 推荐(0)
（软件idea）api操作HDFS（外加hdfs的一下命令）
摘要： 1、首先配置好hadoop的环境变量等内容，配置好maven然后编写一个简单的程序（他的目的是将本地的一个文件进行上传） 代码如下： package com.atguigu.hdfsclient; import org.apache.hadoop.conf.Configuration; import 阅读全文
posted @ 2020-08-15 20:29 喜欢爬的孩子 阅读(699) 评论(0) 推荐(0)