Spark Core快速入门系列(7) | RDD的持久化和检查点

相关阅读

相关 Spark的RDD持久化

Spark的RDD持久化 对于一个RDD的执行流程，从读取文件到一些处理的过程如图所示 ![在这里插入图片描述][watermark_type_ZHJvaWRzYW5

浅浅的花香味﹌/ 2023年10月04日 16:59/ 0 赞/ 52 阅读

相关 Spark Core RDD

1. 什么是 RDD 源码：`https://github.com/apache/spark` `A Resilient Distributed Dataset (RD

ゞ 浴缸里的玫瑰/ 2023年09月29日 18:40/ 0 赞/ 3 阅读

相关 SparkCore之RDD持久化与检查点设置

SparkCore之RDD持久化与检查点设置 1. RDD Cache缓存 RDD通过Cache或者Persist方法将前面的计算结果缓存，默认情况下会把数据以序列

清疚/ 2022年12月31日 06:25/ 0 赞/ 177 阅读

相关 Spark Core快速入门系列(7) | RDD的持久化和检查点

目录 rdd的持久化 聚合算子默认缓存 checkpoint rdd的持久化 ![在这里插入图片描述][watermark

红太狼/ 2022年11月29日 11:28/ 0 赞/ 158 阅读

相关 Spark Core快速入门系列(6) | Spark序列化

目录 spark的序列化 关于序列化的原理 Kyro序列化（建议使用） 总结 spark的序列化 进行 Sp

Love The Way You Lie/ 2022年11月29日 11:21/ 0 赞/ 214 阅读

相关 Spark Core快速入门系列(3) | RDD的依赖关系(宽依赖和窄依赖)

目录 查看RDD的血缘关系 查看RDD的依赖关系 窄依赖 宽依赖 查看RDD的血缘关系 ![在这里插入图片描

r囧r小猫/ 2022年11月28日 03:50/ 0 赞/ 181 阅读

相关 Spark Core快速入门系列(4) | RDD的转换(transformation)

目录 Value 类型 map mapPartitions map()和

川长思鸟来/ 2022年11月28日 00:55/ 0 赞/ 22 阅读

相关 Spark之RDD持久化大全

什么是持久化？ 持久化的意思就是说将RDD的数据缓存到内存中或者持久化到磁盘上，只需要缓存一次，后面对这个RDD做任何计算或者操作，可以直接从缓存中或者磁盘上获得，可以大

叁歲伎倆/ 2022年11月25日 10:19/ 0 赞/ 165 阅读

相关 Spark RDD 持久化

Spark RDD 持久化 注：该文档针对Spark2.1.0版本 Spark最重要的一个功能是它可以通过各种操作（operations）持久化（或者缓存）一个集合到内

矫情吗；*/ 2022年06月08日 05:19/ 0 赞/ 511 阅读

相关 Spark性能优化——RDD持久化

如果程序中，对某一个RDD，基于它进行了多次transformation或者action操作。那么就非常有必要对其进行持久化操作，以避免对一个RDD反复进行计算。 此外，如果要

朴灿烈づ我的快乐病毒、/ 2021年09月14日 04:44/ 0 赞/ 316 阅读