摘要: 前言 在spark中通过hdfs的java接口并发写文件出现了数据丢失的问题,一顿操作后发现原来是FileSystem的缓存机制。补一课先 FileSystem实例化 捎带一嘴,java提供的ServiceLoader有点像乞丐版spring的依赖反转。 然后通过scheme和已经缓存好的FileS 阅读全文
posted @ 2017-11-30 19:53 ulysses_you 阅读(5335) 评论(0) 推荐(0)