将rdd写入文件系统中调用的是什么方法
发布网友
发布时间:2022-10-02 06:06
我来回答
共1个回答
热心网友
时间:2023-10-03 08:14
采用textFile()方法。textFile()方法提供一个本地文件地址或者本地目录地址。如果是本地文件地址,则加载该文件;如果是本地目录地址,则加载该目录下的所有文件的数据。
saveAsTextFile()中的参数是一个不存在目录名称 。如果已经存在该目录,Spark就会报错,所以,在执行saveAsTextFile()之前先判断一下目录是否存在。