我有一个数据框,想要使用pyspark 1.4将其保存为JSON文件,但是好像并不起作用。当我给出目录路径时,它会返回一个错误,指出该路径已存在。根据文档,我的假设是它会将JSON文件保存在您提供的路径中。
df.write.json("C:\Users\username")
指定一个名称的目录不会产生任何文件,并给出“java.io.IOException: Mkdirs failed to create file:/C:Users/username/test/_temporary/....etc”的错误。但是,它确实创建了一个名为test的目录,其中包含几个带有空crc文件的子目录。
df.write.json("C:\Users\username\test")
添加JSON文件扩展名会产生相同的错误
df.write.json("C:\Users\username\test.JSON")