java API操作HDFS文件
搭建环境为:IDEA+MAVEN创建工程
步骤1:打开IDEA,新建项目,选择maven-archetype-quickstart,创建成功后如图:
步骤2:添加hadoop的maven依赖
此处添加依赖为:
<dependency>
<groupId>org.apache.hadoop</groupId>
<artifactId>hadoop-client</artifactId>
<version>${hadoop.version}</version>
</dependency>
定义hadoop的version为:<hadoop.version>2.6.0-cdh5.7.0</hadoop.version>
此处需要添加一个新的依赖库为:
<repositories>
<repository>
<id>hadoopCdh</id>
<url>https://repository.cloudera.com/artifactory/cloudera-repos/</url>
</repository>
</repositories>
可以直接在git上pull下项目,地址为:https://github.com/zlAdmin/hadoopSource.git
我们曾如此渴望生命的波澜,到后来才发现,人生最曼妙的风景是内心的淡定与从容