简历模板大数据开发工程师.pdfVIP

大叙据升成工程师 个人信息 姓 名： 性 别 男 XXX ： 电 话 XXXXXX 邮 箱 XXXp .com ： ： 1 7 @163 工作经验： 年 3 教育经历 毕业学校： 大同大学 专业： XX 计算机科学与技术 工作经历 工作经历 XXXXXXX 技术有限公司 时间 — ： ： 2016.2 2019.3 技术列表 熟练使用 Hadoop 结构体系，以及 Hadoop 集群搭建和维护，理解 HDFS 读写流程、 MapReduce 原理，以及 Hadoop 的 Shuffle 机制及优化。 理解 Spark 任务提交流程以及 Spark RDD 、Shuffle、广播变量等一系列调优。 熟练使用 Flume 完成数据的采集、过滤、分类等功能，理解 Flume 的组成及工作原理。 熟练使用 Kaflca 高低阶 消费数据 理解 Kafka 会使用 API ， 的基本组成及其运行机制。 Kafka 接收相关数据。 熟悉使用 Hive 进行海量数据查询分析，常用的查询函数，以及自定义函数，熟悉 Hive 的架构和调优策略。 熟悉 Zookeeper 的选举机制和监听机制。 熟练使用 DataSet 和 DataFrame 算子以及 UDF 函数处理数据，熟练使用 Dstream 算 子完成实时数据的批次处理。 ， ， ， 熟悉 Redis 的常规操作以及五种数据类型 主从复制 集群搭建 以及Redis 的持久化 方式。 了解Hbase 底层数据存储原理以及 Hbase 中RowKey 的设计。 熟练使用 Scala 和 Java 编程，并了解 Python 编程。 熟练掌握 Linux 命令，可以使用 Shell 编写 Linux 脚本。 的运行原理 GC 优化策略 了解JVM ， 。 熟练使用GIT 、SVN 等代码管理工具。 项目经验 项目名称 别样数仓离线分析 ： 项目架构 Flume Hadoop Hive+ Spark Sqoop ： + + + 开发环境 IDEA Maven ： + + Git +Scala 本项目是为了将分散的操作型数据、 、 项目描述: 埋点数据以及历史数据通过做数据抽取 ， 、 、 ， 清理等有系统的分析整理 得到高效率 高质量 高扩展的数据 以方便联机分析处理 ( OLAP ) 的