大数据工程师简历3份.doc

基本资料 工作年限：4年 工作状态：目前正在找工作 工作意向: 大数据研发工程师 、spark工程师，Hadoop工程师 薪 水：面议 个人技能 1 深刻理解hdfs分布式文件系统存储结构和高可用原理 2 熟练掌握hadoop mapreduce计算框架编程，对yarn的资源调度，作业监控有一定认识 3 掌握storm streaming编程，对定时批量任务处理，分布式rpc有一定认识 4 深刻了解Spark底层运行机制， 4 熟练掌握scala编程，能运用scala进行spark RDD，spark streaming编程 5 熟悉flume，kafka等日志收集，分发框架的使用，能够将他们和storm，spark进行整合 进行数据的实时处理 6 能够熟练运用hive数据仓库工具，对日志数据进行查询，统计等数据操作，并且有一定的数据优化经验 7 能将hive和spark sql进行整合，进行数据查询等相关操作 8 熟悉hbase数据库的使用，及其编程 9 熟悉redis内存数据库，能搭建redis高可用集群及其编程 10 熟悉ELK技术栈，了解ElasticSearch，Logstash的整合使用 11 掌握Sqoop数据迁移工具的使用，能熟练的将数据从不同的存储介质进行迁移 12 了解linux系统，熟悉常用的linux的shell命令，能在linux系统下搭建开发环境 13熟练掌握JavaSE，深刻理解面向对象设计思想，熟练使用IO流操作和集合框架，网络编程等JavaSE主流技术。 14 能使用反射、注解、动态代理等Java高级技术，对代码的封装抽取及其性能优化有点一定的经验。 15 熟悉Struts，Spring，Hibernate，Servlet，Jsp等WEB编程技术 16 能熟练使用Oracle，MySql主流数据库技术，擅长SQL语句的编写 工作经验 1 公司名称：北京联想利泰软件有限公司 性质：民营 时间：2014年8月-至今 职位：大数据研发工程师 参与项目：游戏运营指标分析项目 乐玩家社区用户行为分析项目 移动应用市场应用信息比对项目 2 公司名称：首都信息发展股份有限公司 性质：国有控股 时间：2013年4月-2014年7月 职位：JavaEE工程师 参与项目： 钦州个人贷款系统 电子档案管理系统 3 公司名称：浙江长天信息技术有限公司 性质：民营 时间：2012年3月-2013年3月 职位：javaEE工程师 参与项目：杭州市萧山区基层公共卫生服务系统 杭州市萧山区电力中心设备资源管理系统 项目经验 大数据项目部分 项目名称：游戏运营指标分析项目 开发环境：IDEA+maven+scala+jdk+git 系统架构：ElasticSearch+Logstash+Kafka+Zookeeper+Spark+Hdfs+Hbase+ Mysql+Echarts 项目描述： 游戏玩家的各种行为会产生大量的数据，这些数据可以帮助游戏运维者了解玩家的行为和需求，通过玩家反馈的信息可以不断地矫正游戏中出现的问题，从而让游戏健康稳定的可持续运营。该项目就是为某公司的一款游戏运营情况做多角度的指标分析，从而更好的为公司的游戏推广策略，精准营销，游戏玩家的体验优化，游戏产品的研发等多方面提供数据反馈参考。项目中分析到的指标有新增玩家，活跃玩家，玩家留存率，玩家流失率，玩游戏平均时长，玩游戏频次，收入数据（收入金额，充值人数，收入地区分布等） 责任描述： 1 负责日志数据的采集，使用logstash框架，日志数据来源分为两部分： 游戏官网埋点采集用户点击日志 游戏服务器端收集的所有游戏玩家产生的日志 2 将采集的日志存入kafka，供各个业务模块消费使用 3 利用spa