考试报名
考试报名
考试内容
考试大纲
在线客服
返回顶部

备考刷题,请到

CDA认证小程序

以下关于SPARK中的spark context,描述错误的是:( )
A. 控制整个application的生命周期
B. 可以控制dagsheduler组件
C. 可以控制task scheduler组件
D. SparkContext为Spark的主要入口点
上一题
下一题
收藏
点赞
评论
题目解析
题目评论(0)

在分析选项之前,我们需要了解SparkContext在Apache Spark中的角色和功能。

1. **SparkContext的作用**:
- SparkContext是Spark应用程序的主要入口点。它负责与集群管理器(如YARN、Mesos或Standalone模式)通信,并负责资源的分配。
- 它初始化了Spark应用程序的各个组件,包括DAGScheduler和TaskScheduler。

2. **选项分析**:
- **A: 控制整个application的生命周期**
这是正确的。SparkContext确实控制着Spark应用程序的生命周期。当SparkContext被创建时,应用程序开始;当SparkContext被终止时,应用程序结束。

- **B: 可以控制dagsheduler组件**
SparkContext初始化DAGScheduler,并负责将作业(job)提交给DAGScheduler进行进一步的调度和优化。因此,它与DAGScheduler有直接的交互关系。

- **C: 可以控制task scheduler组件**
SparkContext通过DAGScheduler间接与TaskScheduler交互。TaskScheduler负责将任务(task)分配到各个执行器(executor)上运行。因此,SparkContext并不直接控制TaskScheduler。

- **D: SparkContext为Spark的主要入口点**
这是正确的。SparkContext是Spark应用程序的主要入口点,负责初始化和管理应用程序运行时的各种组件。

综上所述,选项C是描述错误的。虽然SparkContext与TaskScheduler有交互,但它并不直接控制TaskScheduler组件。正确答案是C。