- 1、本文档共11页,可阅读全部内容。
- 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
大数据架构师的具体职责(通用15篇)
大数据架构师的具体职责篇1
职责:
1、负责大数据基础平台的整体规划和架构设计,参与需求分析、
技术决策以及详细设计;
2、为现有大数据集群Hadoop、hive平台提供性能调优、架构优
化重组,解决系统中的关键问题和技术难题;
3、把握基础业务复杂系统的设计,确保系统的架构质量,编写核
心部分代码;
4、持续挑战新的技术方向,攻克大数据量,高并发,稳定性等各
种技术难点。
任职资格:
1、计算机或相关专业本科及以上学历;
2、5年以上hadoop的应用开发经验,5年以上数据仓库开发实
践经验,至少一个企业级数据仓库项目开发经验或者大数据处理项目
经验;
3、良好的编程开发能力,精通PHP及其他开发语言;
4、熟悉mysql等数据库经验,具备优秀的SQL编写、调优能力;
5、熟练掌握Linux常规命令与工具,精通shell,perl,python等
脚本语言至少一种;
6、软件基础理论知识扎实,具有良好的数据结构、算法功底;
7、对新技术敏感,学习能力强,乐于接受挑战,具有良好的团队
合作精神;
大数据架构师的具体职责篇2
职责:
1、负责企业大数据平台的基础建设、管理及制定拓展规划;
2、负责大数据平台相关自动化服务工具的设计、开发;
3、参与Hadoop、Hbase、Spark等核心平台组件的开发、优化;
4、对平台特殊场景化的数据应用制定相关实践方案;
5、大数据团队的搭建。
任职资格:
1、统招本科以上学历,计算机等相关专业,5年以上工作经验;
2、具有Hadoop等大规模集群管理经验、海量(PB)数据处理经验;
3、精通Hadoop、Hive、Hbase等离线平台相关组件的原理机
制;
4、了解或熟悉Storm/Spark/Redis/Kafka/MongoDB等分布式
系统;
5、熟悉高并发、分布式开发等相关知识,具有后端服务优化相关
经验;
6、熟悉爬虫常用框架以及反爬技术;
7、具有良好的沟通能力、分析问题与攻关问题的能力;
8、有责任心,工作积极,对新领域新技术有热情。
大数据架构师的具体职责篇3
职责:
负责大数据平台架构的规划和设计,主导系统的架构设计和核心
模块开发,确保项目质量和关键性能指标达成;
负责大数据平台技术框架的选型与技术难点攻关,指导开发大数据
平台的开发,保证大数据产品的上线运行;
负责深入理解业务需求,对业务建模,设计系统架构,满足业务
需求;
负责协助策略和算法工作,保障数据挖掘建模和工程化;
负责根据业务需求整合优化数据架构,保证产品的可靠性、稳定
性;
负责指导开发人员完成数据模型规划建设、分析模型构建及分析
呈现;
负责研发技术发展方向,新技术领域的探索,将新技术应用到公
司大数据平台,提升公司效能
任职要求:
本科及以上学历,拥有5年以上大数据平台产品或分布式系统设
计经验,6年以上的开发经验;
精通Hadoop,熟悉大数据生态技术,如Storm、Spark、Scala、
Flume、Kafka、Zookeeper、Yarn、Sqoop、CDH、Solr、Kylin、
Impala、Hive、Hbase、Kerberos、Sentry等,有大规模集群架构、
开发及运维经验;
熟练掌握java/Scala语言,实现面向对象开发思想
OOA,OOD,OOP;
熟悉linux操作系统,熟练掌握脚本言语Shell/Perl/Python
您可能关注的文档
- 常用2500个汉字_原创文档.pdf
- 弱电维护工作总结.pdf
- 《中医基础理论》学习笔记:体质的形成.pdf
- 工程资料管理流程、程序.pdf
- 2023年江苏省南京市鼓楼区中考二模地理试卷含详解.pdf
- 甘肃省兰州市成考专升本2023年计算机基础第二次模拟卷(含答案).pdf
- 现代操作系统课后答案.pdf
- 竣工验收及保修阶段的监理措施方案.pdf
- 工期进度违约责任承诺书.pdf
- 劳动法选择题练习(自考复习题).pdf
- 机械制图-机械类下学期知到智慧树期末考试答案题库2024年秋青岛科技大学.docx
- 【重点研报】GISphere留学指南:大数据报告白皮书(2024版)-GISphere-2024.docx
- 【重点研报】AI大模型应用发展研究报告.docx
- 机器学习知到智慧树期末考试答案题库2024年秋三亚学院.docx
- 活力操知到智慧树期末考试答案题库2024年秋黑龙江农业工程职业学院(松北校区).docx
- 机械设计(天津职业技术师范大学)知到智慧树期末考试答案题库2024年秋天津职业技术师范大学.docx
- 一年级班主任兼语文老师工作的述职报告.pptx
- 交通稽查个人总结.pptx
- 优秀部长竞选演讲稿.pptx
- 乡镇班子述职述廉报告.pptx
文档评论(0)