大数据运维工程师的具体职责描述（精选14篇）.pdfVIP

大数据运维工程师的具体职责描述（精选14篇）--第1页

大数据运维工程师的具体职责描述（精选14篇）

大数据运维工程师的具体职责描述篇1

职责：

1、负责大数据集群的日常维护、监控、异常处理等工作，保障集

群稳定运行;

2、负责大数据批处理管理以及运维;

3、负责大数据集群的用户管理、权限管理、资源管理、性能优化

等;

4、深入理解数据平台架构，发现并解决重大故障及性能瓶颈，打

造一流的数据平台;

5、跟进大数据前沿技术，不断优化数据集群;

6、有华为大数据平台运维经验优先;

岗位要求：

1、1年以上大数据运维或开发经验;

2、有良好的计算机和网络基础，熟悉linux文件系统、内核、性

能调优，TCP/IP、HTTP等协议;

3、熟悉大数据生态，有相关(HDFS、Hive、Hbase、Sqoop、

Spark、Flume、Zookeeper、ES、Kafka)的运维及开发经验;

4、熟练使用shell、python等脚本语言开发相关运维管理工具;

5、良好的文档撰写习惯;

大数据运维工程师的具体职责描述篇2

职责：

1、负责分布式大数据平台产品的运维和运维开发，保证其高可用

和稳定性;

2、负责大数据系统架构的可运维性设计、容量规划、服务监控，

持续优化服务架构、集群性能;

3、通过技术手段控制和优化成本，通过自动化工具及流程提升大

数据平台运维效率;

4、为项目开发人员提供大数据技术指导及解决大数据平台应用中

大数据运维工程师的具体职责描述（精选14篇）--第1页

大数据运维工程师的具体职责描述（精选14篇）--第2页

遇到的技术难题;

任职资格：

1、三年以上大数据运维相关工作经验，有大型互联网公司工作经

验者优先，全日制本科及以上学历;

2、熟练掌握至少一门开发语言，有Java或Python语言开发经验

优先;

3、精通Hadoop生态及高性能缓存相关的各种工具并有实战经

验，包括但不限于Hadoop、HBase、Hive、Presto、Kafka、Spark、

Yarn、Flink、Logstash、Flume、ClickHouse等;

4、熟悉Mysql等常用关系数据库，熟练编写SQL语句，有分布

式nosql数据库应用、性能调优经验优先;

5、熟悉Linux环境，能够熟悉使用shell脚本;

6、对大数据技术有强烈兴趣，有志于往大数据方向深层次发展;

7、具有很强的责任心、执行力、服务意识、学习能力和抗压能力;

8、具备较好的沟通能力、主动性及责任感。

大数据运维工程师的具体职责描述篇3

职责：

1、负责公司内部及项目中大数据集群的构建，任务调度、监控预

警，持续完善大数据平台，保证稳定性、安全性;

2、负责集群容量规划、扩容、集群性能优化及日常巡检和应急值

守，参与大数据基础环境的架构设计与改进;

3、深入研究大数据业务相关运维技术