高级大数据开发工程师
高级大数据开发工程师
单栏 · 无照片
python大数据开发工程师
技能
Python
Spark
Flink
Hive/SQL
Kafka
数据仓库建模
教育背景
上海理工大学
本科双一流
计算机科学与技术 本科
上海2014年9月 - 2018年6月
主修数据结构、数据库系统、数据仓库与统计学，GPA 3.7/4.0。
荣誉奖项
2023年度技术创新奖
优秀项目奖
志愿服务经历
数据分析导师
社区数据技术工作坊
线上2023年1月 - 至今
- 指导早期职业数据分析师完成SQL与Python项目实战。
项目经验
实时用户画像标签平台
数据开发核心成员
2023年5月 - 2024年10月
- 基于Flink + Kafka构建实时标签计算链路，支持200+用户标签的分钟级更新，服务推荐与营销场景。
- 设计标签存储与查询方案，使用HBase + Redis，将标签查询P99延迟控制在50ms以内，支撑日均千万级调用。
- 通过资源调优与反压治理，使Flink作业稳定运行，资源成本降低25%。
离线数仓性能优化专项
项目负责人
2022年8月 - 2023年2月
- 主导Hive SQL与Spark任务性能诊断，通过分区裁剪、数据倾斜处理和小文件合并，将核心链路平均耗时降低40%。
- 建立任务基线监控看板，覆盖150个核心任务，异常任务平均处理时长从2小时缩短至30分钟。
课外活动
数据平台技术小组
数据技术部/技术分享负责人
上海2021年3月 - 2023年12月
- 组织内部Spark调优分享6场，沉淀调优手册被团队沿用。
个人总结
6年Python大数据开发经验，精通Spark、Flink、Hive生态，主导日均百亿级数据管道建设。擅长数仓分层建模与性能调优，曾将核心任务耗时降低40%。具备扎实SQL与Linux功底，能快速定位并解决线上数据问题。
工作经历
上海数联科技有限公司
上海
大数据电商
大数据开发工程师
2022年3月 - 2025年10月
SparkFlink
- 负责用户行为数据仓库建设，使用Spark优化ETL流程，将核心报表产出时间从6小时缩短至3.5小时，保障每日200+业务指标准时交付。
- 主导Flink实时数据管道开发，支撑大促期间峰值每秒50万条订单数据的实时清洗与入仓，延迟稳定在2秒以内。
- 设计并落地数据质量监控体系，覆盖120张核心表，数据异常发现时效提升70%，减少下游客诉30%。
上海云智数据服务有限公司
上海
SaaS数据服务
数据开发工程师
2020年7月 - 2022年2月
HivePython
- 参与离线数仓分层建模与Hive SQL开发，完成30+业务主题域表设计，支撑公司SaaS产品多租户数据分析需求。
- 使用Python编写数据清洗与调度脚本，替代人工处理流程，每月节省运维人力约40小时，任务成功率提升至99.5%。
证书与认证
阿里云大数据工程师认证（ACP） - 阿里云
2024年3月
证明云上数据管道与数仓开发能力。
数据库系统工程师（软考中级） - 工业和信息化部
2023年11月
证明数据库设计与性能优化能力。
其他信息
到岗时间:
可接受出差，一个月内到岗。
作品集:
GitHub 持续维护 PySpark 调优与数据治理工具。
更多大数据开发工程师模板
同一职位，不同的版式和写法。点开任意一份即可查看大图。
hadoop大数据开发工程师
hadoop大数据开发工程师
单栏 · 无照片
大数据平台开发工程师
大数据平台开发工程师
双栏 · 有照片
自动驾驶大数据开发工程师
自动驾驶大数据开发工程师
双栏 · 有照片
大数据平台高级开发工程师
大数据平台高级开发工程师
双栏 · 无照片
大数据资深开发工程师
大数据资深开发工程师
单栏 · 无照片
大数据开发工程师
大数据开发工程师
单栏 · 无照片
大数据开发运维工程师
大数据开发运维工程师
双栏 · 有照片
就从这份模板开始
模板会复制到你的账户里，每一句话、每个板块和颜色都能改，改好再下载 PDF。