请在 下方输入 要搜索的题目：
推荐参考答案 (
由 搜题小帮手 官方老师解答 )
答案：
以下文字与答案无关
提示：有些试题内容 显示不完整,文字错误 或者 答案显示错误等问题，这是由于我们在扫描录入过程中 机器识别错误导致,人工逐条矫正总有遗漏，所以恳请 广大网友理解。
相关试题
- 1.关于RDD之间的依赖分为窄依赖和宽依赖，以下说法正确的是？? 存在一个父RDD的一个分区对应一个子RDD的多个分区，则为宽依赖存在一个父RDD的多个分区对应一个子RDD的一个分区，则为宽依赖存在一个父RDD的一个分区只被一个子RDD的一个分区所使用，则为窄依赖存在一个父RDD的一个分区被一个子RDD的多个分区所使用，则为窄依赖
- 2.关于RDD之间的依赖分为窄依赖和宽依赖，以下说法正确的是？ 选项：A、存在一个父RDD的一个分区对应一个子RDD的多个分区，则为宽依赖 B、存在一个父RDD的多个分区对应一个子RDD的一个分区，则为宽依赖 C、存在一个父RDD的一个分区只被一个子RDD的一个分区所使用，则为窄依赖 D、存在一个父RDD的一个分区被一个子RDD的多个分区所使用，则为窄依赖
- 3.关于RDD之间的依赖分为窄依赖和宽依赖，以下说法正确的是？A.存在一个父RDD的一个分区对应一个子RDD的多个分区，则为宽依赖B.存在一个父RDD的多个分区对应一个子RDD的一个分区，则为宽依赖C.存在一个父RDD的一个分区只被一个子RDD的一个分区所使用，则为窄依赖D.存在一个父RDD的一个分区被一个子RDD的多个分区所使用，则为窄依赖
- 4.【多选题】关于RDD之间的依赖分为窄依赖和宽依赖，以下说法正确的是？A. 存在一个父RDD的一个分区对应一个子RDD的多个分区，则为宽依赖B. 存在一个父RDD的多个分区对应一个子RDD的一个分区，则为宽依赖C. 存在一个父RDD的一个分区只被一个子RDD的一个分区所使用，则为窄依赖D. 存在一个父RDD的一个分区被一个子RDD的多个分区所使用，则为窄依赖
- 5. 在Spark中RDD之间的依赖关系用Linage表示，其中宽依赖是指（ ）。 选项： A: 父RDD的每个分区都被多个子RDD的分区依赖 B: 父RDD的每个分区都只被子RDD的一个分区依赖 C: 父RDD的分区只被子RDD的一个分区依赖 D: 父RDD的分区被多个子RDD的分区依赖
- 6.下列关于RDD之间窄依赖和宽依赖关系的描述，错误的是（ ）。 选项： A、窄依赖是指父RDD一个分区只被一个子RDD中一个分区所使用。 B、宽依赖是指父RDD一个分区能被一个子RDD上多个分区所使用。 C、窄依赖典型操作包括map、filter、union和join等。 D、宽依赖典型操作包括groupByKey、sortByKey等。
- 7.(单选题)下列关于RDD之间窄依赖和宽依赖关系的描述,错误的是( )。 选项： A、窄依赖是指父RDD一个分区只被一个子RDD中一个分区所使用。 B、宽依赖是指父RDD一个分区能被一个子RDD上多个分区所使用。 C、窄依赖典型操作包括map、filter、union和join等。 D、宽依赖典型操作包括groupByKey、sortByKey等。
- 8.简述RDD的依赖关系。 ----------- 窄依赖是指父RDD的每一个分区最多被一个子RDD的分区使用，即OneToOneDependencies。窄依赖的表现一般分为两类，第一类表现为一个父RDD的分区对应于一个子RDD的分区；第二类表现为多个父RDD的分区对应于一个子RDD的分区。也就是说，一个父RDD的一个分区不可能对应一个子RDD的多个分区。为了便于理解，我们通常把窄依赖形象的比喻为独生子女。当RDD执行map、filter及union和join操作时，都会产生窄依赖。 宽依赖是指子RDD的每一个分区都会使用所有父RDD的所有分区或多个分区，即OneToManyDependecies。为了便于理解，我们通常把宽依赖形象的比喻为超生。当RDD做groupByKey和join操作时，会产生宽依赖。 ( )】
- 9.简述RDD的依赖关系。 ----------- 窄依赖是指父RDD的每一个分区最多被一个子RDD的分区使用，即OneToOneDependencies。窄依赖的表现一般分为两类，第一类表现为一个父RDD的分区对应于一个子RDD的分区；第二类表现为多个父RDD的分区对应于一个子RDD的分区。也就是说，一个父RDD的一个分区不可能对应一个子RDD的多个分区。为了便于理解，我们通常把窄依赖形象的比喻为独生子女。当RDD执行map、filter及union和join操作时，都会产生窄依赖。 宽依赖是指子RDD的每一个分区都会使用所有父RDD的所有分区或多个分区，即OneToManyDependecies。为了便于理解，我们通常把宽依赖形象的比喻为超生。当RDD做groupByKey和join操作时，会产生宽依赖。 ( )】
- 10. 以下对窄依赖描述正确的是（ ） 单选 选项： A:可以表现为一个父RDD的分区对应于一个子RDD的分区，对输入进行协同划分 B:可以表现为多个父RDD的分区对应于一个子RDD的分区，对输入进行非协同划分 C:表现为存在一个父RDD的一个分区对应一个子RDD的多个分区,对输入进行非协同划分 D:表现为存在一个父RDD的一个分区对应一个子RDD的多个分区,对输入进行协同划分
- 11.窄依赖就是指父 RDD 的分区被多个子 RDD 的分区所依赖，例如groupByKey、reduceByKey等操作选项： A:正确; B:错误
- 12.简述RDD的依赖关系。 (简答题) 宽依赖是指子RDD的每一个分区都会使用所有父RDD的所有分区或多个分区,即OneToManyDependecies。为了便于理解,我们通常把宽依赖形象的比喻为超生。当RDD做groupByKey和join操作时,会产生宽依赖。
- 13.试述如下Spark的几个主要概念：RDD、DAG、阶段、分区、窄依赖、宽依赖。
- 14.关于spark容错说法错误的有（） 选项： A:在容错机制中，如果⼀个节点死机了，⽽且运算窄依赖，则只要把丢失的⽗RDD分区重算即可，不依赖于其他节点。⽽宽依赖需要⽗RDD的所有分区都存在，重算就很昂贵了。可以这样理解开销的经济与否：在窄依赖中，在⼦RDD的分区丢失、重算⽗RDD分区时，⽗RDD相应分区的所有数据都是⼦RDD分区的数据，并不存在冗余计算。在宽依赖情况下，丢失⼀个⼦RDD分区重算的每个⽗RDD的每个分区的所有数据并不是都给丢失的⼦RDD分区⽤的，会有⼀部分数据相当于对应的是未丢失的⼦RDD分区中需要的数据，这样就会产⽣冗余计算开销，这也是宽依赖开销更⼤的原因。因此如果使⽤Checkpoint算⼦来做检查点，不仅要考虑Lineage是否⾜够长，也要考虑是否有宽依 赖，对宽依赖加Checkpoint是最物有所值的 B:宽依赖开销更大 C:Checkpoint可以节约大量的系统 资源 D:RDD的容错机制是基于Spark Streaming的容错机制
- 15.Plain Text在Spark RDD中，划分Stage的依据是（） 选项： A、所在分区 B、窄依赖 C、宽依赖 D、shuffle操作
- 16.下面关于RDD分区的说法，不正确的是____________________。 选项： A、为便于并行计算，RDD的分区须放在同一个节点上 B、使用分区可以增加并行度 C、使用分区可以减少通信开销 D、RDD通常会很大，所以被分成很多个分区
- 17. 对于宽依赖来说，RDD分区的转换处理是在一个线程里完成，所以宽依赖会被Spark划分到同一个Stage中。 选项： A:正确 B:错误
- 18.关于spark容错说法错误的有() 选项： A:在容错机制中,如果一个节点死 机了,而且运算窄依赖,则只要 把丢失的父RDD分区重算即可, 依于其他节点 B:宽依赖开销更大 C:Checkpoint可以节约大量的系统 资源 D:RDD的容错机制是基于Spark Streaming的容错机制
- 19.有关RDD的相关说法错误的是 选项： A:RDD称为分布式数据集 B:RDD是多分区的 C:RDD是之间存在依赖关系 D:RDD里的数据是可以修改的
