对于Apache,检查点是做什么的,它在RAM或CPU上会受到什么影响吗?
发布于 2016-04-14 19:52:24
从Apache流文档 -希望它可以帮助:
流应用程序必须24/7操作,因此必须能够抵御与应用程序逻辑无关的故障(例如,系统故障、JVM崩溃等)。要做到这一点,星火流需要检查足够的信息到一个容错存储系统,以便它可以从故障中恢复。有两种类型的数据是检查点的。
总之,元数据检查点主要用于从驱动程序故障中恢复,而即使使用有状态转换,数据或RDD检查点也是必要的。
https://stackoverflow.com/questions/36632356
复制相似问题