hadoop大数据开发工程师
hadoop大数据开发工程师
双栏 · 无照片
hadoop开发
个人总结
5年大数据平台开发经验，专注Hadoop生态离线与实时数据链路建设，主导过PB级数据仓库迁移与集群治理。熟练使用HDFS、YARN、Hive、Spark、Flink及Kafka，具备扎实的Java与Scala开发能力。曾将核心任务平均耗时降低40%，保障日均百亿级数据稳定产出。
工作经历
杭州云数智联科技有限公司
杭州
大数据服务互联网
大数据开发工程师
2022年7月 - 至今
HadoopSpark
- 负责Hadoop集群与离线数仓开发，支撑日均80TB数据接入，任务按时产出率提升至99.5%。
- 重构Hive SQL与Spark任务共120余个，核心报表产出时间由4小时缩短至2.4小时。
- 制定YARN队列与资源配额规范，集群资源利用率提升25%，月度计算成本下降约18%。
浙江数聚信息技术有限公司
杭州
企业服务数据平台
Hadoop开发工程师
2020年7月 - 2022年6月
Hive数据仓库
- 参与PB级数据仓库从传统数据库向Hadoop平台迁移，完成300余张核心表建模与同步。
- 开发MapReduce与Hive离线任务，支撑电商客户每日订单与用户行为分析，数据准确率达99.9%。
- 搭建任务监控与告警体系，故障平均发现时间由2小时降至15分钟。
项目经验
实时数仓与Flink链路建设
2023年3月 - 2024年9月
核心开发
- 主导Flink实时链路建设，实现订单与埋点数据秒级入仓，端到端延迟控制在5秒内。
- 设计Kafka分区与消费组方案，峰值吞吐提升至每秒12万条，支撑大促期间零积压。
Hadoop集群性能治理专项
2022年8月 - 2023年1月
开发负责人
- 负责小文件合并与分区治理，NameNode元数据压力下降约35%。
- 优化数据倾斜与Shuffle参数，重点任务失败率由8%降至1%以内。
主要成就
集群资源利用率提升25%
通过队列隔离与容量调度改造，集群资源利用率提升25%，年度计算成本节省约60万元。
核心链路稳定性达99.5%
建立数据质量校验与任务SLA监控机制，核心链路按时产出率稳定在99.5%以上。
其他信息
到岗时间:
可接受短期出差，离职状态可一周内到岗。
作品集:
个人技术博客与开源代码仓库：github.com/zhanghaoran-bigdata。
证书与认证
阿里云大数据工程师认证（ACP） - 阿里云
2023年11月
证明大数据平台规划、开发与运维能力。
数据库系统工程师（软考中级） - 工业和信息化部
2021年5月
证明数据库设计与开发能力。
教育背景
浙江工业大学
一本省重点
计算机科学与技术 本科
杭州2016年9月 - 2020年6月
主修数据结构、操作系统、数据库系统与分布式计算，毕业设计为基于Hadoop的日志分析平台。
技能
Hadoop（HDFS/YARN/MapReduce）
Hive / Spark
Flink / Kafka
Java / Scala
HBase / ClickHouse
Linux / Shell / 调度（Azkaban、DolphinScheduler）
荣誉奖项
校级一等奖学金
浙江省大学生程序设计竞赛二等奖
更多Hadoop模板
同一职位，不同的版式和写法。点开任意一份即可查看大图。
Hadoop平台开发工程师
Hadoop平台开发工程师
单栏 · 有照片
hadoop大数据运维
hadoop大数据运维
双栏 · 有照片
Hadoop集群管理工程师
Hadoop集群管理工程师
双栏 · 无照片
hadoop运维工程师
hadoop运维工程师
双栏 · 无照片
Hadoop云平台开发工程师
Hadoop云平台开发工程师
双栏 · 无照片
Hadoop数据分析师
Hadoop数据分析师
双栏 · 无照片
hadoop大数据开发
hadoop大数据开发
双栏 · 有照片
就从这份模板开始
模板会复制到你的账户里，每一句话、每个板块和颜色都能改，改好再下载 PDF。