pyspark之从HDFS上读取文件、从本地读取文件

2020-08-26 09:55:59 浏览数 (2)

hdfs上的路径:

代码语言:javascript复制
path="hdfs:///主机名:端口号/地址"

本地上的路径:

代码语言:javascript复制
path"file:///本地地址"

读取文件:

代码语言:javascript复制
rdd=sc.textFile(path)

0 人点赞