2018年10月19日
Spark：java api读取hdfs目录下多个文件
摘要： 需求： 由于一个大文件，在spark中加载性能比较差。于是把一个大文件拆分为多个小文件后上传到hdfs，然而在spark2.2下如何加载某个目录下多个文件呢? 测试结果： 阅读全文
posted @ 2018-10-19 15:57 cctext 阅读(11639) 评论(0) 推荐(0)