跳到正文
熊猫简历

登录 / 注册

微信扫码、手机号或邮箱验证码登录,新用户自动注册。

Hadoop平台开发工程师简历模板

  • 单栏
  • A4
  • 有照片
  • ATS
上传我的简历

Hadoop平台开发工程师

头像

熊帅帅

Hadoop平台开发工程师
phone138 0013 8000
city杭州
gender男
birth1995年6月
job_status在职-考虑机会
intended_city杭州
max_salary20-28K
个人总结

6年大数据平台开发经验,专注Hadoop生态集群建设与运维,主导过千节点集群迁移与YARN资源调度优化。熟悉HDFS、YARN、Hive、Spark、Flink源码级调优,具备PB级数据平台稳定性保障与成本优化实战经验。擅长通过架构改造与参数调优提升集群吞吐、降低资源成本,支撑业务方日均万级任务稳定运行。

技能
Hadoop(HDFS/YARN/MapReduce)
Hive / Spark / Flink
Java / Scala 开发
集群运维与故障排查
Linux / Shell / Python
Kafka / HBase / ClickHouse
工作经历
杭州云启数据科技有限公司
大数据平台互联网
杭州
Hadoop平台开发工程师
Hadoop集群运维
2022年9月 - 至今
  • 负责300+节点Hadoop集群的规划、部署与日常运维,主导YARN队列与资源池重构,集群平均资源利用率由52%提升至78%。
  • 推动HDFS小文件治理与冷热分层存储改造,存储成本下降约30%,NameNode元数据压力显著缓解。
  • 建立集群监控告警与故障自愈体系,覆盖200+核心指标,重大故障平均恢复时间由45分钟缩短至12分钟。
上海数联信息技术有限公司
企业服务数据中台
上海
大数据开发工程师
HiveSpark
2020年7月 - 2022年8月
  • 参与PB级数据仓库建设,基于Hive与Spark开发离线ETL任务150+个,支撑日处理数据量约20TB。
  • 负责MapReduce与Spark作业性能调优,通过参数与数据倾斜治理使核心任务平均耗时降低40%。
  • 配合业务方完成数据口径梳理与任务上线流程规范,任务按时产出率稳定在99%以上。
项目经验
千节点Hadoop集群跨机房迁移 - 平台开发负责人
2024年3月 - 2024年5月
  • 主导1200节点集群跨机房平滑迁移,设计双写与灰度切换方案,实现业务零感知切换。
  • 迁移期间数据一致性校验覆盖率100%,累计迁移数据量约3PB,未发生数据丢失事故。
  • 迁移后集群整体计算性能提升约25%,为后续业务扩容预留充足资源空间。
YARN资源调度优化与成本治理 - 核心开发
2022年12月 - 2023年2月
  • 基于YARN Capacity Scheduler重构多租户队列模型,实现部门级资源配额与优先级管理。
  • 引入弹性资源池与任务排队策略,高峰期任务平均等待时间缩短约35%。
  • 通过资源画像与闲置回收机制,年度服务器采购成本节省约120万元。
教育背景
杭州电子科技大学
本科双一流
杭州
计算机科学与技术 本科
2016年8月 - 2020年5月

主修课程:操作系统、分布式系统、数据库原理、数据结构与算法;CET-6。

证书与认证
阿里云大数据工程师认证(ACP) - 阿里云
2023年8月

证明云上大数据平台建设与数据开发能力。

数据库系统工程师(软考中级) - 工业和信息化部
2021年5月

证明数据库设计与系统管理能力。

其他信息
到岗时间:

在职,确认录用后一个月内到岗,可接受短期出差。

技术输出:

GitHub 维护Hadoop运维脚本与调优笔记,累计获得200+ Star。

更多Hadoop模板

同一职位,不同的版式和写法。点开任意一份即可查看大图。

查看全部 27 份

就从这份模板开始

模板会复制到你的账户里,每一句话、每个板块和颜色都能改,改好再下载 PDF。

上传我的简历