2020年2月5日
摘要: 5.sc.textFiles() 与 sc.wholeTextFiles() 的区别 sc.textFile()是将path 里的所有文件内容读出,以文件中的每一行作为一条记录的方式,文件的每一行 相当于 列表 的一个元素,因此可以在每个partition中用for i in data的形式遍历处理 阅读全文
posted @ 2020-02-05 17:07 啥123 阅读(393) 评论(0) 推荐(0)