Spark容错机制

Spark容错机制？

Spark的容错机制分为两种：
*第一种方式:*LineAge内部如果有分片数据丢失，可以通过上下依赖关系，启动重算机制，进行容错。
第二种方式：spark可以通过checkPoint机制，设置一个第三方存储路径（一般是hdfs）,当有数据丢失的时候，从对应的路径恢复数据，但是一旦启动了checkPoint意味着之前的LineAge被终止。