大数据架构师的岗位职责.pdfVIP

大数据架构师的岗位职责

大数据架构师的岗位职责（通用15篇）

大数据架构师的岗位职责篇1

职责：

1、搭建基于Hadoop/Spark的数据挖掘体系和大数据分析系统架构;

2、讨论大数据领域前沿数据挖掘技术，并引入相应技术在数据中心

的使用;

3、进行大数据系统框架设计、模型算法开发;

4、负责大型数据挖掘项目方案制定、项目实施落地及优化等;

5、开展数据爬取、聚类分析、舆情分析、鱼骨图分析、定价策略等

领域数据挖掘工作;

任职资格：

1、本科以上学历(持有学士学位)(985，211优先)，计算机相关专业，

五年工作阅历;

2、二年以上数据挖掘项目阅历，完整参加过数据挖掘大数据平台的

架构开发过程，具备互联网行业背景优先;

3、精通分布式计算框架(hadoop、spark、Storm等)及相关阅历，娴

熟把握Hive/SQL，Python，熟识Python、R相关数值科学计算库

(NumPy,SciPy等);

4、了解传统的BI/DW理论，能结合传统BI实践设计大数据平台;

5、熟识常用机器学习算法(如分类、回归、聚类、关联规章等)及其

原理，具备应用场景阅历，如用户画像、商品关联度分析、舆情分析;

6、熟识主数据、元数据、数据质量、和数据建模等数据治理相关的

体系和方法;

7、具备较强的规律思维力量、数据敏感度，擅于利用数据发觉问题

及解决问题;

大数据架构师的岗位职责篇2

职责：

1、负责大数据开发团队建设;

2、负责行业大数据产品架构设计与研发;

3、负责带领团队进行行业大数据产品关键技术攻关。

任职要求：

1、有三年以上大数据应用、开发阅历;具备海量数据加工处理(ETL)

相关阅历，对数据挖掘及机器学习有较为深刻的理解;

2、熟识Hadoop相关技术，对HDFS、MapReduce、Hive、HBase有肯

定的使用和开发阅历;

3、熟识Linux，娴熟使用Shell或Python，进行脚本编写;

4、对数据结构和数据统计分析算法有较为深刻理解;

5、把握至少一种主流关系数据库开发技术：Oracle、SQLServer、

MySQL等;

6、把握实时流计算技术，有Spark、Storm开发阅历者优先;

7、需要具备2年以上研发团队管理阅历。

大数据架构师的岗位职责篇3

职责：

1.负责公司大数据底层框架的整体架构设计，结合公司实际业务状况

进行技术选型及大数据战略规划;

2.负责统一数据平台项目的整体评估、设计、架构及关键模块的开发，

不断提升系统的稳定性和效率;

3.负责架构优化及系统关键模块的设计开发，帮助团队解决开发过程

中的技术难题;

4.建立良好的公司内外的业界技术影响力;有效辅导团队，提升数据

研发力量;

任职要求：

1.从事大数据项目相关开发和设计2年以上阅历;有作为技术负责人

系统化解决问题的胜利案例;有海量数据实践阅历优先;

2.拥有肯定的算法和数据结构基础;有很强的数据设计抽象力量，擅

长从简单的数据问题中找到关键路径;

3.熟识目前正在进展的大数据分布式平台前沿技术的应用;包括但不

仅仅限于：hadoop、storm、spark、等;

4.良好的规律思维力量，良好的业务解读力量，懂电力或通信业务

优先;

5.具有钻研精神，乐于接受挑战;

大数据架构师的岗位职责篇4

职责:

1)负责公司软件产品整体架构的设计和关键功能实现

2)负责公司架构长期看护以及优化;

3)负责软件部门各模组间的协调协作;

4)提高巩固软件代码质量;

5)负责大数据流式框架的设计、优化及部署;

6)规划研发部门员工的技术进展路线并供应必要的关心和指导

任职资格:

1)本科及以上学历，计算机相关专业，5年以上工作阅历;

2)频繁换工作，