目录
百战程序员,全站22050+开发课程+文档 ,学习精选优质好课快人一步!观看视频 快捷键ALT+N

大数据全系列 教程

1869个小节阅读:467.9k

收藏
全部开发者教程

408考研

JAVA全系列 教程

面向对象的程序设计语言

Python全系列 教程

Python3.x版本,未来主流的版本

人工智能 教程

顺势而为,AI创新未来

大厂算法 教程

算法,程序员自我提升必经之路

C++ 教程

一门通用计算机编程语言

微服务 教程

目前业界流行的框架组合

web前端全系列 教程

通向WEB技术世界的钥匙

大数据全系列 教程

站在云端操控万千数据

AIGC全能工具班

A

A A

White Night

阅读(226)
赞(0)

RDD_算子概述

定义:分布式集合RDD对象的方法被称为算子

算子分类:

  1. Transformation转换算子
  2. Action行动算子

  • Transformation转换算子

    定义:返回值仍然是一个RDD的RDD算子,被称为转换算子。

    特点:这类算子是懒加载的,在没有遇到Action算子前,所有的转换算子都是不执行的。

    作用:构建执行计划

  • Action行动算子

    定义:返回值不是RDD的算子就是Action行动算子。

    特点:立即执行

    作用:让由转换算子构建好的执行计划开启工作,并根据行动算子的指示做最后的处理工作。

  • WordCount案例中的转换算子和Action行动算子

实时效果反馈

1. 以下关于RDD算子的描述错误的是:

A 返回值仍然是一个RDD的RDD算子,被称为转换算子。

B 运行到转换算子所在的代码行时,转换算子便开始执行,不需要等待到Action行动算子。

C 返回值不是RDD的算子就是Action行动算子。

D 程序中的RDD运行到行动算子,之前构建的执行计划才会执行。

答案:

1=>B 转换算子是懒加载的,在没有遇到Action算子前,所有的转换算子都是不执行的。

 

北京市昌平区回龙观镇南店村综合商业楼2楼226室

©2014-2023 百战卓越(北京)科技有限公司 All Rights Reserved.

京ICP备14032124号-2