- 1、本文档共12页,可阅读全部内容。
- 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
大数据开发工程师的基本职责(精选20篇)--第1页
大数据开发工程师的基本职责(精选20篇)
大数据开发工程师的基本职责篇1
职责:
1.参与大数据平台搭建以及项目技术架构。
2.数据分析,挖掘,模型具体的产品化;
3.根据产品需求,分析编写和制定大数据相关解决方案
岗位要求:
1、计算机相关专业本科以上学历,编程基础扎实,有2年以上大
数据开发经验
2、熟悉Hadoop生态和体系架构,熟悉Flink、Spark,Hive等
常用开源工具
3、熟悉Flume,kakfa,scribe等日志收集体系
4、熟悉主流数据库(Oracle、postgresql、Mysql、SqlServer)
中的1种及以上,有较好的SQL性能调优经验
5、有数据仓库ETL经验者优先
6、有用户行为日志采集、海量数据处理、数据建模方面经验者优
先
7、有持续学习的能力;喜欢开源软件,乐于知识分享;对工作认真
负责;可以独立承担较大工作压力
大数据开发工程师的基本职责篇2
职责:
1、负责大数据平台的基础环境搭建与性能优化,完成平台的构建
与维护、实时流计算平台、分布式调度、可视化报表等平台的架构与
研发;
2、对各种开源框架进行深入的代码剖析和优化;
3、参与大数据技术方案评审;
4、指导初中级大数据工程师工作;
岗位要求:
1、计算机相关专业全日制专科及以上学历,具有3年或以上的分
大数据开发工程师的基本职责(精选20篇)--第1页
大数据开发工程师的基本职责(精选20篇)--第2页
布式计算平台研发工作经验;
2.对大数据相关组件:Hadoop、Spark、Hbase、Hive、Flink、
Kafka、Flume等架构与底层实现有深入理解,具备相应的定制和研发
能力,尤其需要精通Flink框架;
3.具备构建稳定的大数据基础平台的能力,具备数据收集、数据
清洗、数据仓库建设、实时流计算等系统研发经验;
4.对技术有热情,有不错的数据思维和敏感度,有一定的数据分
析能力优先,对深度学习、机器学习有一定的了解优先;
5.工作有计划性,责任心和执行能力强,具备高度的责任心、诚
信的工作作风、优秀沟通能力及团队精神。
大数据开发工程师的基本职责篇3
职责:
1、大数据日志分析系统的设计,选型和开发;
2、配合各业务给予数据支持,对产品和运营数据总结和优化;
3、处理用户海量数据,提取、分析、归纳用户属性,行为等信息,
完成分析结果;
4、发现并指出数据异常情况,分析数据合理性;
5、公司大数据基础架构平台的运维,保障数据平台服务的稳定性
和可用性;
6、大数据基础架构平台的监控、资源管理、数据流管理;
7、基于数据分析的可预测的云平台弹性扩展解决方案。
任职要求:
1、日志分析数据系统实际经验;
2、3年以上互联网行业研发经验,有使用Hadoop/hive/spark
分析海量数据的能力;
3、掌
文档评论(0)