首页
注册
登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请
登录
广告
V2EX
›
程序员
spark 程序 saveAsTextFile 生成的目录中存在_temporary 目录是什么原因?该如何解决?
wudc
·
2018-05-26 20:08:26 +08:00
· 3313 次点击
这是一个创建于 2162 天前的主题,其中的信息可能已经有所发展或是发生改变。
目录
temporary
Spark
生成
2 条回复
•
2018-05-26 21:25:31 +08:00
1
tinybaby365
2018-05-26 20:12:27 +08:00
saveAsTextFile 没有执行完。如果 job 已经退出,就是发生了异常,否则还在输出。如果 job 没退出,但输出耗时太久,可以 repartition 一下。
2
wudc
OP
2018-05-26 21:25:31 +08:00
1
@
tinybaby365
但是结果里面有_success
关于
·
帮助文档
·
博客
·
API
·
FAQ
·
我们的愿景
·
实用小工具
·
2237 人在线
最高记录 6543
·
Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 415ms ·
UTC 00:40
·
PVG 08:40
·
LAX 17:40
·
JFK 20:40
Developed with
CodeLauncher
♥ Do have faith in what you're doing.