特牛网址导航

6.RDD的持久化和检查点-CSDN博客

网友收藏
文章浏览阅读205次。RDD的持久化和检查点RDD的持久化RDD可以通过persist方法或chche方法将前面的计算结果缓存到内存中,默认情况下presist()会将数据以序列化的形式缓存在JVM的堆空间之中。presist可以传入StorageLevel.的属性配置OFF_HEAP有利于立即回收内存。使用缓存持久化时不会删除血缘关系,父RDD的血缘关系还存在RDD的检查点Spark 中对于数据的保存除了..._rdd检查点除了写在硬盘还可以写在哪?