Linux 拨号vps windows公众号手机端

Spark中的延迟操作是什么

lewis 6年前 (2020-01-31) 阅读数 12 #网络运维
文章标签 spark

延迟操作(Delayed Operations)是指Spark中的转换操作(transformation)不会立即执行,而是等到触发动作操作(action)时才会被执行。这样的延迟执行可以帮助Spark优化执行计划,提高性能。常见的延迟操作包括map、filter、reduce等转换操作,而触发动作包括collect、count、save等。通过延迟操作,Spark可以根据需要构建一个完整的执行计划图,然后一次性执行,避免了频繁的数据传输和计算。

版权声明

本文仅代表作者观点,不代表米安网络立场。

发表评论:

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。

热门