大数据开发测试工程师
大数据开发测试工程师
单栏 · 无照片
python大数据开发
教育背景
武汉理工大学
211双一流
计算机科学与技术 本科
武汉2016年9月 - 2020年6月
主修数据结构、数据库系统、分布式计算，毕业设计为基于Spark的日志分析平台。
技能
Python
SQL
Spark
Flink
Hive/Hadoop
Kafka
数据仓库建模
Airflow调度
Docker/K8s
荣誉奖项
校级优秀毕业生
全国大学生数学建模竞赛省级二等奖
个人总结
5年Python大数据开发经验，熟悉Hadoop、Spark、Flink生态，具备PB级数据仓库建设与实时数仓落地能力。主导过离线与实时数据链路优化，任务稳定性提升至99.9%，计算成本下降约30%。熟悉电商与金融业务场景，能独立完成从需求分析到上线运维的全流程交付。
工作经历
杭州云数科技有限公司
杭州
电商数据服务
Python大数据开发工程师
2022年9月 - 至今
SparkFlink
- 负责电商交易域离线数仓建设，基于Spark重构核心ETL链路，日均处理数据量提升至8TB，任务耗时缩短35%。
- 搭建Flink实时数仓，支撑大促实时看板与风控指标，端到端延迟由分钟级降至10秒内。
- 推动调度与资源治理，通过分区裁剪和小文件合并，集群计算成本下降约28%。
武汉智联信息技术有限公司
武汉
金融科技软件服务
大数据开发工程师
2020年7月 - 2022年8月
HivePython
- 使用Python与Hive开发信贷业务报表体系，覆盖30余张核心指标表，支撑风控与运营日常决策。
- 优化历史数据回溯流程，将月度对账任务从6小时压缩至1.5小时，数据准确率提升至99.9%。
项目经验
电商实时数仓平台建设
2023年3月 - 2024年6月
数据开发负责人
- 基于Flink+Kafka搭建实时数仓分层架构，统一埋点与订单数据口径，支撑12个实时指标看板。
- 设计维表关联与状态管理方案，解决数据倾斜问题，峰值吞吐提升约2倍。
- 建立数据质量监控与告警机制，线上数据异常发现时间由小时级缩短至5分钟内。
离线数据治理与成本优化
2022年10月 - 2023年2月
核心开发
- 梳理300余个离线任务依赖关系，识别并下线冗余任务60余个，释放集群资源约20%。
- 制定分区规范与小文件治理策略，存储占用下降约25%，任务平均运行时长缩短30%。
主要成就
实时链路性能提升
将核心实时指标端到端延迟从分钟级优化至10秒内，支撑大促期间稳定运行。
计算成本显著下降
通过资源治理与任务优化，年度集群计算成本节省约30万元。
数据质量体系建设
主导建立数据质量监控规范，核心报表准确率长期保持在99.9%以上。
证书与认证
阿里云大数据工程师认证（ACP） - 阿里云
2024年3月
证明云上大数据平台建设与数据开发能力。
数据库系统工程师（软考中级） - 工业和信息化部
2023年11月
证明数据库设计与数据管理能力。
更多数据开发模板
同一职位，不同的版式和写法。点开任意一份即可查看大图。
实时数据库开发工程师
实时数据库开发工程师
双栏 · 有照片
ETL开发运维工程师
ETL开发运维工程师
单栏 · 有照片
数据迁移运维工程师
数据迁移运维工程师
单栏 · 有照片
大数据开发运维工程师
大数据开发运维工程师
单栏 · 有照片
高级大数据开发工程师
高级大数据开发工程师
双栏 · 有照片
实时数据开发
实时数据开发
单栏 · 无照片
中级数据开发工程师
中级数据开发工程师
单栏 · 无照片
就从这份模板开始
模板会复制到你的账户里，每一句话、每个板块和颜色都能改，改好再下载 PDF。