web | Java

检查点(重点)

千锋教育

spark通过checkPoint方法将RDD状态保存在高可用存储中,与持久化不同的是


它是对RDD状态的一个复制持久化,执行checkPoint后不再保存依赖链。


此外,持久化存储的缓存当程序运行结束后就会被自动删除,检查点保存的RDD状态只能手动清理。