- 链接地址:https://blog.csdn.net/resilienter/article/details/103937554
- 链接标题:6.RDD的持久化和检查点-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:3646
文章浏览阅读205次。RDD的持久化和检查点RDD的持久化RDD可以通过persist方法或chche方法将前面的计算结果缓存到内存中,默认情况下presist()会将数据以序列化的形式缓存在JVM的堆空间之中。presist可以传入StorageLevel.的属性配置OFF_HEAP有利于立即回收内存。使用缓存持久化时不会删除血缘关系,父RDD的血缘关系还存在RDD的检查点Spark 中对于数据的保存除了..._rdd检查点除了写在硬盘还可以写在哪?
版权声明:本文发布于特牛网址导航 内容均来源于互联网 如有侵权联系删除