大数据架构师的基本职责.pdfVIP

丹青不知老将至，贫贱于我如浮云。——杜甫

大数据架构师的基本职责

大数据架构师需要参与规划从数据源到数据应用的整体流程，并

参与相关产品的决策。下面是店铺为您精心整理的大数据架构师的基

本职责。

大数据架构师的基本职责1

职责：

1.负责整个大数据平台架构的设计和构建;

2.负责构建大数据平台的数据交换、任务调度等通用平台;

3.制定开发、测试、实施、维护的标准和规范，指导和培训工程

师，不断提升团队能力。

4.参与系统需求分析、架构设计、技术选型、应用设计与开发以

及测试与部署，负责编写核心部分代码。

5.持续挑战新的技术方向，攻克大数据量、高并发、高可用、可

扩展等技术难点。

任职要求：

1.3年以上大数据架构经验，丰富的数据仓库、数据挖掘、机器学

习项目经验

2.大规模数据处理的架构和设计实战经验

3.精通Spark、MR，熟练HDFS、Yarn、Hbase、Hive、

MongoDB，熟悉Kafka、Redis、Storm、Mahout、Flume、

ElasticSearch、GraphDB(NEO4J或其他)等，并具有丰富的大型数据

平台工程经验

4.深刻理解大数据处理(流计算，分布式计算，分布式文件系统，

分布式存储等)相关技术和实现方法

5.熟悉主数据、元数据、数据质量等企业数据管理相关的体系和

方法，熟练Linux/Unix平台上的开发环境

6.本科或以上学历，计算机软件或相关专业，丰富的java开发经

验和互联网背景优先。

7.具有比较强的问题分析和处理能力，有比较优秀的动手能力，

丹青不知老将至，贫贱于我如浮云。——杜甫

热衷技术，精益求精

大数据架构师的基本职责2

职责：

1.深刻理解政府行业业务模式，构建政府行业的数据模型，制定

公司大数据技术发展路线;

2.对接业务研究和技术部门，主动搜集和转化需求，组织数据中

心业务开发，进行数据相关产品需求分析和设计;

3.搭建数据仓库，研发数据库管理系统，搜集、提取、处理业务

积累的海量数据，开展数据分析和挖掘;

4.根据公司战略和发展需要，规划数据中心重点工作和任务;落实

部门人员、事务管理，开展跨部门、跨地区协作，协助对外交流与合

作。

职位要求：

1.5年以上相关工作经验，有团队管理和项目管理经验者优先;

2.了解政府运作机制，掌握财政行业知识，有电子政务行业经验

者优先;

3.熟练掌握使用Java或Python,精通数据库查询语言如SQL，

Oracle等,在机器学习模型和算法方向有应用经验者优先;

4.具备数据中心产品策划整体思维，有大数据处理、分析、挖掘

经验者优先;

5.逻辑思维严密，具备业务抽象、分解和标准化的能力，口头和

书面表达优秀;

6.有较强的大局意识和良好的团队合作意识，富有领导力，具备

优秀的人际交往和沟通