数据工程师岗位岗位职责15篇.pdf

数据工程师岗位岗位职责15篇--第1页

数据工程师岗位岗位职责15篇

数据工程师岗位岗位职责1

职责：

1.负责公司大数据业务集群的运维工作确保高可用;

2.负责基础运维、故障定位、容量规划、扩容及性能优化;

3.设计实现大规模分布式集群的运维、报警监控和管理平台;

4.参与业务架构设计，在设计阶段给出可运维性改进建议;

5.深入研究大数据业务相关运维技术，持续优化集群服务架构，探

索新的大数据运维技术及发展方向。

任职资格：

1.大专以上学历，2年及以上大数据运维工作经验，熟悉

hadoop/hbase/hive/Yarn/Spark等分布式相关技术，熟悉源码尤佳，至

少掌握python/shell中的一种语言，接受优秀;

2.了解大数据平台应用架构，具备常见问题的基本分析和解决能

力;

3.熟悉Linux操作系统的配置、管理及优化，能够独立排查及解

决操作系统层面的问题;

数据工程师岗位岗位职责15篇--第1页

数据工程师岗位岗位职责15篇--第2页

4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web应用/中间

件及主流开源数据库的使用和配置。

数据工程师岗位岗位职责2

职责：

1.负责业务的数仓数据集市的建设,能提炼通用需求,数仓标准,实

现高质量的数据互通共享

2.对海量数据进行统计与分析,产品效果评估与分析,为产品策略

优化迭代提供强有力的数据支持

3.和业务团队紧密合作推动数据产品与服务的.落地,具备良好的

沟通协调能力

任职要求：

1.计算机数学统计,金融等相关专业的本科或以上学历;从事数仓

领域至少3年以上,具备海量数据的DW模型设计与ETL开发经验2.熟悉

数仓领域知识,包括但不局限于:数据质量,元数据管理,主数据管理,数

据开发测试工具与方法;

3.掌握Greenplum,Oracle,Teradata,Mysql等至少一种,灵活运用

SQL实现海量数据ETL加工处理;有Greenplum经验优先

数据工程师岗位岗位职责15篇--第2页

数据工程师岗位岗位职责15篇--第3页

4.具有数据仓库相关开发经验,如ETL,建模,BI,数据产品等,熟悉

数仓模型

5.掌握一门或多门开发语言,不限于java/python/scala等,熟悉

Linux/Unix平台上的开发环境

6、主导过大型数据仓库架构或模型设计经验者优先;

7、较好的沟通理解能力，性格乐观，态度踏实，积极上进;

数据工程师岗位岗位职责3

职责：

1.负责数据挖掘、机器学习、人工智能技术的研究，并将技术应用

在业务建模中

2.结合实际场景，构建算法模型并进行训练验证，对模型和算法进

行持续优化和迭代

3.和用户沟通洽谈，将业务痛点转化为数据理解，探索多种算法来

解决业务问题

4.核心算法研究，实践探索，持续跟进模型算法的`前沿技术和发

展趋势，结合公司业务进行技术预研

岗位要求：

数据工程师岗位岗位职责15篇--第3页

数据工程师岗位岗位职责15篇--第4页

1.金融、统计、数学、计算机等相关专业硕士及以