摘要: 一.HDFS的写(上传)操作 所谓的写操作,那么就是将client的文件(可能是本地)写入到HDFS当中。 写操作的流程如图所示: 过程概述: 1.我们有一个大小为200mb的文件,在逻辑上将其分为两个block,并不是在实际当中进行分割(这里不知道为什么分为了128mb和72mb两个block,因 阅读全文
posted @ 2021-01-05 13:36 Geeksongs 阅读(532) 评论(0) 推荐(0) 编辑
摘要: 一.程序的架构 一般来讲我们可以使用命令行在linux下对HDFS进行操作,那么我们也可以使用Java对HDFS进行操作,因为一旦使用了Java,我们可以编写Java程序定时对HDFS进行操作,这样就会更加的自动,也就不需要人为在linux下输入这些命令了。这里我使用了Junit的Java单元测试对 阅读全文
posted @ 2021-01-05 11:20 Geeksongs 阅读(460) 评论(0) 推荐(0) 编辑

Coded by Geeksongs on Linux

All rights reserved, no one is allowed to pirate or use the document for other purposes.