admin 管理员组文章数量: 1086019
2024年3月10日发(作者：html5游戏开发实战pdf)
基本资料
工作年限
：4年
工作状态
：目前正在找工作
工作意向
: 大数据研发工程师 、spark工程师，Hadoop工程师
薪 水
：面议
个人技能
1 深刻理解hdfs分布式文件系统存储结构和高可用原理
2 熟练掌握hadoop mapreduce计算框架编程，对yarn的资源调度，作业监控有一定认识
3 掌握storm streaming编程，对定时批量任务处理，分布式rpc有一定认识
4 深刻了解Spark底层运行机制，
4 熟练掌握scala编程，能运用scala进行spark RDD，spark streaming编程
5 熟悉flume，kafka等日志收集，分发框架的使用，能够将他们和storm，spark进行整合
进行数据的实时处理
6 能够熟练运用hive数据仓库工具，对日志数据进行查询，统计等数据操作，并且有一定
的数据优化经验
7 能将hive和spark sql进行整合，进行数据查询等相关操作
8 熟悉hbase数据库的使用，及其编程
9 熟悉redis内存数据库，能搭建redis高可用集群及其编程
10 熟悉ELK技术栈，了解ElasticSearch，Logstash的整合使用
11 掌握Sqoop数据迁移工具的使用，能熟练的将数据从不同的存储介质进行迁移
12 了解linux系统，熟悉常用的linux的shell命令，能在linux系统下搭建开发环境
13熟练掌握JavaSE，深刻理解面向对象设计思想，熟练使用IO流操作和集合框架，网络编
程等JavaSE主流技术。
14 能使用反射、注解、动态代理等Java高级技术，对代码的封装抽取及其性能优化有点一
定的经验。
15 熟悉Struts，Spring，Hibernate，Servlet，Jsp等WEB编程技术
16 能熟练使用Oracle，MySql主流数据库技术，擅长SQL语句的编写
工作经验
1 公司名称：北京联想利泰软件有限公司 性质：民营
时间：2014年8月-至今 职位：大数据研发工程师
参与项目：游戏运营指标分析项目
乐玩家社区用户行为分析项目
移动应用市场应用信息比对项目
2 公司名称：首都信息发展股份有限公司 性质：国有控股
时间：2013年4月-2014年7月 职位：JavaEE工程师
参与项目： 钦州个人贷款系统
电子档案管理系统
3 公司名称：浙江长天信息技术有限公司 性质：民营
时间：2012年3月-2013年3月 职位：javaEE工程师
参与项目：杭州市萧山区基层公共卫生服务系统
杭州市萧山区电力中心设备资源管理系统
项目经验
大数据项目部分
项目名称：游戏运营指标分析项目
开发环境：IDEA+maven+scala+jdk+git
系统架构：ElasticSearch+Logstash+Kafka+Zookeeper+Spark+Hdfs+Hbase+
Mysql+Echarts
项目描述：
游戏玩家的各种行为会产生大量的数据，这些数据可以帮助游戏运维者了解玩家的行为
和需求，通过玩家反馈的信息可以不断地矫正游戏中出现的问题，从而让游戏健康稳定的可
持续运营。该项目就是为某公司的一款游戏运营情况做多角度的指标分析，从而更好的为公
司的游戏推广策略，精准营销，游戏玩家的体验优化，游戏产品的研发等多方面提供数据反
馈参考。项目中分析到的指标有新增玩家，活跃玩家，玩家留存率，玩家流失率，玩游戏平
均时长，玩游戏频次，收入数据（收入金额，充值人数，收入地区分布等）
责任描述：
1 负责日志数据的采集，使用logstash框架，日志数据来源分为两部分：
1） 游戏官网埋点采集用户点击日志
2） 游戏服务器端收集的所有游戏玩家产生的日志
2 将采集的日志存入kafka，供各个业务模块消费使用
3 利用spark Rdd和spark streaming编程对新增玩家，活跃玩家，玩家留存率，
收入数据等指标的多维度统计分析
4 将自己分析的实时指标数据存入hbase，离线指标数据存入mysql
5 将自己分析的指标结果用Echarts图标展示出来
项目名称： 乐玩家社区用户行为分析系统
开发环境： eclipse+maven+jdk+git
系统架构： hadoop+zookeeper+flume+hive+hbase+sqoop+mysql+SSM+Echarts
项目描述：
乐玩家社区是联想手机社区论坛，用于用户粉丝交流互动，同时发布联想手机的各个品
牌宣传信息，以及收集用户反馈，用户可以在上面发帖，提建议，发起各种交流活动，通过
对乐玩家社区网站的日志进行分析，计算网站关键指标，其中关键性指标有，浏览量:页面
浏览量即为PV(Page View)，每日登陆用户数UV，每周UV，。跳出率=跳出数/PV：跳出率
是非常重要的访客黏性指标，它显示了访客对网站的兴趣程度：跳出率越低说明流量质量越
好，访客对网站的内容越感兴趣，这些访客越可能是网站的有效用户、忠实用户。板块访问
量pv，和板块独立ip访问量。多维度用户留存率
责任描述 :
1 使用flume监听每天的日志目录，将每天的日志文件上传到hdfs上相应的目录下
2.通过写mapreduce任务对数据进行清洗
3.用hive进行网站的pv，uv，用户注册数，用户留存率进行多维度分析统计
版权声明：本文标题：大数据工程师简历3份 内容由网友自发贡献，该文观点仅代表作者本人， 转载请联系作者并注明出处：http://roclinux.cn/b/1710018874a553883.html， 本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容，一经查实，本站将立刻删除。
发表评论