Spark大数据技术与应用智慧树知到课后章节答案2023年下山西职业技术学院.pdfVIP

Spark大数据技术与应用智慧树知到课后章节答案2023年下山西职业

技术学院

山西职业技术学院

绪论单元测试

1.大数据的起源是以下哪个领域（）

A:互联网B:金融C:公共管理D:电信

答案:互联网

第一章测试

1.与MapReduce相比，Spark更适合处理以下哪种类型的任务（）

A:较少迭代次数的长任务B:较少迭代次数的短任务C:较多迭代次数的短任

务D:较多迭代次数的长任务

答案:较多迭代次数的短任务

2.Standalone模式下配置Spark集群时，master节点的工作端口号需要在

conf文件夹下的哪个文件指明（）

A:regionserverB:slavesC:spark-defaults.confD:spark-env.sh

答案:spark-env.sh

3.以下关于SPARK中的sparkcontext，描述错误的是：（）

A:可以控制dagsheduler组件B:可以控制taskscheduler组件C:控制整个

application的生命周期D:SparkContext为Spark的主要入口点

答案:控制整个application的生命周期

4.以下对Spark中Work的主要工作描述错误的是（）

A:不会运行业务逻辑代码B:会运行业务逻辑代码C:管理当前节点内存D:接

收master分配过来的资源指令

答案:会运行业务逻辑代码

5.配置Standalone模式下的Spark集群，Worker节点需要在conf文件夹下

的哪个文件中指明（）

A:spark-env.shB:spark-defaults.confC:slavesD:regionserver

答案:slaves

6.Spark支持的分布式部署方式中哪个是错误的（）

A:SparkonlocalB:sparkonYARNC:sparkonmesosD:standalone

答案:Sparkonlocal

7.Spark单机伪分布式模式，它的特点是在一台节点上既有Master服务，又

有Worker服务（）

A:对B:错

答案:对

8.在部署Spark独立模式时，配置spark内部通信的端口为（）

A:16010B:7070C:9870D:7077

答案:7077

9.在部署Spark独立模式时，配置spark的web端口为（）

A:7077B:8080C:9870D:4040

答案:7077

10.Spark的bin目录是spark运行脚本目录，该目录中包含了加载spark的配

置信息，提交作业等执行命令的脚本（）

A:错B:对

答案:对

第二章测试

1.valrdd=sc.parallelize(1to10).filter(_%2==0)rdd.collect上述代码的执行结

果为（）

A:Array(1,3,5,7,9)B:Array(2,4,6,8,10)C:Array(1,2,3,4,5,6,7,8,9,10)

D:Array(1,10)

答案:Array(2,4,6,8,10)

2.下面哪个操作是窄依赖（）

A:filterB:sortC:groupD:join

答案:filter

3.下面哪个操作肯定是宽依赖（）

A:mapB:sampleC:flatMapD:reduceByKey

答案:reduceByKey

4.以下操作中，哪个不是