2019年7月30日

FileInputFormat 的实现之TextInputFormat

摘要: 说明 TextInputFormat默认是按行切分记录record,本篇在于理解,对于同一条记录record,如果被切分在不同的split时是怎么处理的。首先getSplits是在逻辑上划分,并没有物理切分,也就是只是记录每个split从文件的个位置读到哪个位置,文件还是一个整体。所以在LineRe 阅读全文

posted @ 2019-07-30 10:07 天生一对 阅读(1472) 评论(0) 推荐(0) 编辑

导航