大数据研发工程师简历.pdfVIP

XX 大数据研发工程师简历 姓 名： 性 别 男 XX ： ： （ ） 龄： 毕业院校 河南大学 一本 年 25 联系电话 XXXXXXXXX ： ： 目前城市 北京 E XXXXX . -mail： @163com a 应聘方向 工作性质 全职 应聘职位：大数据研发工程师 求职地点：北京 薪资 要 求： 面议 B 工作经历 单位名称 XXXX 电子商务有限公司 职位名称 大数据研发工程师 工作时间 2016.5 2019.2 - B 职业技能 存储流程， 调度机制， 工作原理， ， 1. 熟练掌握 Hadoop Hdfs Yarn MapReduce 高可用部署 mr 运行性能调优。 熟练 HQL 开窗及 ， HQL 熟练掌握 数仓结构， 函数应用 熟悉 优化执行手段。 2. hive UDTF 、 3. 熟练掌握 flume , 有使用多层 Flume 搭建高可用和容灾架构的经验。 4. 熟练使用 Sqoop 将数据在 Hdfs 和关系型数据库之间转移。 熟练使用 实现分布式， ，熟悉 高低阶 差别，掌握 5. Kafka 大吞吐集群 Kafka API Kafka 一致性机制以及一次性语意。 6. 熟练使用 SparkCore，SparkSql , SparkStreaming 编码，涉及过 SparkMLIib 编程，熟 悉 Spark 任务提交执行流程及内存调优。 7. 熟练使用 Scala, Java8进行业务代码编写。 8. 熟练使用 Linux 操作系统，能够编写 Shell 脚本。 9. 熟练使用 crontab, Azkaban 进行任务调度。 10.理解 Hbase 数据存储原理，有处理过 HRegion 热点问题，Rowkey 设计等开发设计经 验。 11.熟练使用 Mysql 数据库操作，以及使用 Redis 做缓存处理。 12.了解 Elasticsearch 有哪些信誉好的足球投注网站引擎及 MongoDB 数据库基本操作。 B 项目经历 项目一： 猎趣电商分析系统 软件架构: Nginx+Flume+Zookeeper+Spark+Hadoop+Spingboot+Hive+Mysql 开发环境： , IDEA+JDK 1 8+Maven+Git ， ， 项目描述：该项目通过对电商网站的用户行为数据进行埋点 根据平台统计数据 辅助 PM 和后端人员分析现有的产品情况， 并根据用户行为数据分析的结果来改善展示以及调整公司 的战略和业务。 责任描述: 1. 参与项目需求分析，负责相关模块搭建。 2. 采用双层 Flume 架构构建日志采集模块。