java API操作HDFS文件

搭建环境为:IDEA+MAVEN创建工程

步骤1:打开IDEA,新建项目,选择maven-archetype-quickstart,创建成功后如图:

   

步骤2:添加hadoop的maven依赖

    此处添加依赖为:

<dependency>
<groupId>org.apache.hadoop</groupId>
<artifactId>hadoop-client</artifactId>
<version>${hadoop.version}</version>
</dependency>
定义hadoop的version为:<hadoop.version>2.6.0-cdh5.7.0</hadoop.version>

此处需要添加一个新的依赖库为:
<repositories>
<repository>
<id>hadoopCdh</id>
<url>https://repository.cloudera.com/artifactory/cloudera-repos/</url>
</repository>
</repositories>
可以直接在git上pull下项目,地址为:https://github.com/zlAdmin/hadoopSource.git
posted @ 2018-12-02 21:16  zlAdmin  阅读(263)  评论(0)    收藏  举报