随笔分类 -  存储&计算系统【06】Hadoop

摘要:最近测试结论 Flink跨集群操作HDFS文件,不能再main方法中操作,而是要到算子里操作; 不跨集群,在哪操作都行(main方法里,算子里都行) hadoop的FileSytem操作HDFS 样例 import org.apache.hadoop.conf.Configuration; impo 阅读全文
posted @ 2021-12-03 02:20 空归
摘要:HDFS的API操作 1.HDFS的JAVA API操作 HDFS在生产应用中主要是客户端的开发,其核心步骤是从HDFS提供的api中构造一个HDFS的>访问客户端对象,然后通过该客户端对象操作(增删改查)HDFS上的文件。 2.配置Windows下Hadoop环境 在windows上做HDFS客户 阅读全文
posted @ 2021-12-03 01:17 空归