Fork me on GitHub

pyspark之从HDFS上读取文件、从本地读取文件

hdfs上的路径:

path="hdfs:///主机名:端口号/地址"

本地上的路径:

path"file:///本地地址"

读取文件:

rdd=sc.textFile(path)

 

posted @ 2020-08-11 22:22  西西嘛呦  阅读(4060)  评论(0)    收藏  举报