2025年山东大数据工程师真题及答案 .pdfVIP

君子忧道不忧贫。——孔丘

山东大数据工程师真题及答案

一、选择题

1.下面哪个程序负责HDFS数据存储。答案Cdatanode

a)NameNodeb)Jobtrackerc)Datanode

d)secondaryNameNodee)tasktracker

2.HDfS中的block默认保存几份?答案A默认3分

a)3份b)2份c)1份d)不确定

3.下列哪个程序通常与NameNode在一个节点启动?答案D

a)SecondaryNameNodeb)DataNodec)TaskTracker

d)Jobtracke

此题分析：

hadoop的集群是基于master/slave模式，namenode和

jobtracker属于master，datanode和tasktracker属于slave，

master只有一个，而slave有多个SecondaryNameNode内存需

求和NameNode在一个数量级上，所以通常secondary

NameNode(运行在单独的物理机器上)和NameNode运行在不同

的机器上。

在此我向大家推荐一个交流学习群：615997810里面会分享一些资

深大数据工程师架构师录制的视频录像：有Linux、Hadoop核集群

搭建、HDFS、Mapreduce、YARN、离线计算Flume、Hive、实

时计算、大数据ETL、大数据应用与数据挖掘的原理这些成为大，数

古之立大事者，不惟有超世之才，亦必有坚忍不拔之志。——苏轼

据开发师必备的知识体系。还能领取免费的学习资源，目前受益良多。

JobTracker和TaskTracker

JobTracker对应于NameNode

TaskTracker对应于DataNode

DataNode和NameNode是针对数据存放来而言的

JobTracker和TaskTracker是对于MapReduce执行而言的

mapreduce中几个主要概念，mapreduce整体上可以分为这么几

条执行线索：obclient，JobTracker与TaskTracker。

1)、JobClient会在用户端通过JobClient类将应用已经配置参数打

包成jar文件存储到hdfs，并把路径提交到Jobtracker,然后由

JobTracker创建每一个Task(即MapTask和ReduceTask)并将它们

分发到各个TaskTracker服务中去执行。

2)、JobTracker是一个master服务，软件启动之后JobTracker接

收Job，负责调度Job的每一个子任务task运行于TaskTracker上，

并监控它们，如果发现有失败的task就重新运行它。一般情况应该

把JobTracker部署在单独的机器上。

3)、TaskTracker是运行在多个节点上的slaver服务。TaskTracker

主动与JobTracker通信，接收作业，并负责直接执行每一个任务。

TaskTracker都需要运行在HDFS的DataNode上。

4.Hadoop作者答案：CDougcutting