2018年度大数据开发简历模板【优质ppt】
- 格式:pptx
- 大小:5.26 MB
- 文档页数:26
大数据开发工程师个人简历>个人概况姓名:XX籍贯:XX性别:男工作年限:4年年龄:XX学历:本科联系方式:xxxxxxx E-mai1:XXXXXXX>求职意向目标职能:大数据开发工程师工作性质:全职目标地点:北京到岗时间:即时>工作经验工作单位:XXXXX有限公司工作日期:2016.8-2019.2工作职位:大数据开发工程师工作日期:2015.3-2016.8工作职位:JaVa开发工程师>专业技能1熟练使用SparkCoreRDD算子处理改据,熟悉Spark任务提交流程.2、熟练使用SparkSqI查询数据,自定义UDF,熟练使用SparkStreaming处理实时数据,熟悉DataSet x DataFream x Rdd三者之间的转化。
3、熟练使用M叩reduce处理复杂业务,熟悉HDFS的读写流程,熟悉M叩reduce的shuff1e过程及优化,熟悉shuff1e过程的优化手段和Hadoop集群搭建。
4、熟悉Z。
OkeePer的选举机制和监听机制。
5、熟悉Hive架构,使用窗口函数和自定义UDF处理数据,熟悉Hive优化策略。
6、熟练使用F1ume工具完成日志的采集过滤和分类,使用Gang1ia监控工具.7、熟练使用Kafka高低阶API消费数据,熟悉KafkaOffsetManager监控工具。
8、熟练使用E1asticsearch创建索引,利用AP1批量保存数据,使用Kibina查询es索引。
9、熟悉MySqI,Mongodb,RediS数据库的使用。
10、熟练使用Sqoop把Hive表数据从HDFS导入到Mysq1数据库。
I1熟练掌握常用的1inux命令,使用She11命令编写She11脚本,Azkaban完成定时调度。
12、熟练用IDEA,Ec1ipse,Git1ab,SVN,Maven,Xshe11开发工具。
>项目经验项目一:西瓜籽APP实时分析开发时间:2018.05-2019.02开发环境:IDEA+Maven+Git1ab+SQ1yog+Xshe11+CIouderManager系统:SparkStreaming+Hive+Hadoop+Kafka+Redis+Easticsearch+Mysq1+Sca1a项目描述:西瓜籽是网智天元旗下集影视资讯、电影推荐、粉圈互动、电影评分、明星同款商城等多功能为一体的app,旨在发现粉丝用户的观影行为,引导粉丝消费;利用大数据平台对用户行为进行统计分析,发展粉丝经济。
大数据开发工程师-赵毅个人资料姓名:XX学位:本科邮箱:XXXXXX求职意向 工作性质:全职目标地点:北京 期望职位:大数据开发工程帅专业技能1. 熟练使用MapReduce 处理复杂业务,熟悉HDFS 的读写流程、MapRcduce 的运行流程以及Shuffle 机制、Yarn 的工作机制、Hadoop 的优化手段以及Hadoop 框架搭建过程。
2.熟悉Zookeeper 的选举机制和监听机制。
3.熟悉HiVe 的架构和调优策略,熟练使用Hive 的开窗等函数处理业务问题。
4.熟练使用FIUnIC 完成数据的采集、过滤、分流等功能,熟悉双层FlUme 的使用。
5.熟悉Kafka 的工作流程、能够搭建Kafka 集群,使用Kafka 和Spark 进行数据的流式处理。
6.熟悉HBasc 框架,会使用HBaSe 的基本操作以及HBase 调优。
7. 熟练掌握SPark 任务调度和资源调度过程,会使用SPark 常用的RDD 算子处理数据,能够独立完成SPark 集群的搭建,熟悉SPark 的优化策略。
8. 熟练使用DataSet 和DataFrame 算子和UDAF 函数处理数据,熟练使用DStream 算子完成流式实时数据的批次处理。
9. 了解 EIaStiCSearCho10. 会使用Azkaban 和Oozie 批量工作流任务调度器。
11. 会使用SqOoP 工具,实现关系型数据库和非关系型数据库表数据的交互。
12. 熟练使用Java 和Scala 编程,了解Python 编程。
13. 了解MongoDB 、RCdiS 等非关系型数据库。
14. 熟练掌握常用的LinUX 命令,使用ShelI 常用工具编写LinUX 脚本。
工作经历公司名称: 工作时间: 职位名称: 项目经验XXXXX 教育科技有限公司 2015.07-至今大数据开发工程师项目名称: 开发环境:技术框架:项目描述:东奥电商业务分析系统(2017.01—2019-02)IDEA + jdkl.8 + MySQL+ Maven + SVN SpringBoot-. Nginx 、Flume- Hadoop∙. Hive 、Spark 、Sqoop∙, Azkaban通过对PC 端和手机APP 端用户产生的各类型日志经过一系列处理,形成各种报表,并且 将网站的品牌前十、每月畅销图书、每季热门名师、地区点击量排名等统计出来,提供给公司 的各大责任描述: 1 .参与前期项目分析、设计系统整体架构。