scala – 如何将Spark RDD保存到本地文件系统

发布时间：2020-12-16 18:12:59 所属栏目：安全来源：网络整理

导读：我可以使用saveAsTextFile语法将文件保存到本地系统吗？这就是我编写保存文件的语法：insert_df.rdd.saveAsTextFile(“ local path”) 当我正在尝试这样做时,我得到错误,因为没有权限,但我拥有该特定本地路径的所有权限,看起来它将文件视为HDFS文件. 解决方

我可以使用saveAsTextFile语法将文件保存到本地系统吗？
这就是我编写保存文件的语法：insert_df.rdd.saveAsTextFile(“< local path>”)

当我正在尝试这样做时,我得到错误,因为没有权限,但我拥有该特定本地路径的所有权限,看起来它将文件视为HDFS文件.

解决方法

我认为你应该尝试“file：/// local path”而不是“/ local path”.

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!