Hive系统运维
Hive系统运维
双栏 · 无照片
Hive性能优化工程师
教育背景
浙江大学
985211双一流
计算机科学与技术 本科
杭州2015年9月 - 2019年6月
主修数据库系统、分布式计算与数据仓库，毕业设计方向为大数据查询优化。
技能
Hive SQL调优
执行计划分析
数据倾斜治理
Tez/Spark引擎
JVM与资源调优
Hadoop生态
荣誉奖项
公司年度技术之星
校级优秀毕业生
课外活动
浙大数据技术协会
技术部/技术负责人
杭州2017年9月 - 2019年5月
- 组织大数据技术分享与Hadoop实践工作坊，累计参与学生超200人。
个人总结
5年大数据平台开发与Hive性能优化经验，主导PB级数仓SQL调优与执行计划优化，擅长数据倾斜治理、存储格式与执行引擎参数调优。熟悉Hive底层架构与Tez/Spark执行引擎，具备JVM与资源调度调优能力。累计支撑日均百万级任务稳定运行，核心链路耗时平均下降50%以上。
工作经历
杭州数澜科技有限公司
杭州
大数据平台企业数据服务
大数据平台工程师
2021年3月 - 至今
Hive调优数据仓库
- 负责集团Hive数仓性能治理，通过分区裁剪与存储格式改造，核心报表任务耗时下降55%。
- 主导数据倾斜专项优化，重写十余个热点SQL并调整join策略，日均任务失败率由3%降至0.4%。
- 搭建慢查询监控与调优规范，推动20余个业务团队接入，集群资源利用率提升约30%。
上海云瀚信息技术有限公司
上海
互联网数据服务
数据开发工程师
2019年7月 - 2021年2月
HiveETL开发
- 参与PB级用户行为数仓建设，负责Hive表设计与ETL开发，支撑日均百亿级日志加工。
- 优化Tez执行引擎参数与并行度配置，批处理链路整体耗时缩短约40%。
项目经验
集团Hive数仓性能治理专项
2022年4月 - 2023年12月
性能优化负责人
- 针对慢查询TOP50任务逐条分析执行计划，结合分区裁剪与文件合并，平均耗时下降52%。
- 引入小文件合并与压缩策略，NameNode元数据压力下降约35%，任务稳定性显著提升。
主要成就
集群成本优化
通过资源队列与参数治理，年度集群计算成本节省约120万元。
稳定性提升
建立慢查询与倾斜预警机制，核心链路SLA由99.5%提升至99.95%。
知识沉淀
输出Hive调优手册与案例库20余篇，成为团队新人培训标准材料。
证书与认证
阿里云大数据工程师认证（ACP） - 阿里云
2023年8月
覆盖大数据计算与数仓建模能力。
数据库系统工程师（软考中级） - 工业和信息化部
2022年5月
覆盖数据库设计与优化能力。
其他信息
到岗时间:
离职状态，一周内可到岗，可接受短期出差。
技术作品:
GitHub维护Hive调优脚本与执行计划分析工具。
更多Hive模板
同一职位，不同的版式和写法。点开任意一份即可查看大图。
Hive与其他系统集成运维
Hive与其他系统集成运维
单栏 · 无照片
Hive数据仓库运维
Hive数据仓库运维
单栏 · 有照片
Hive版本升级运维
Hive版本升级运维
双栏 · 有照片
Hive监控与告警工程师
Hive监控与告警工程师
双栏 · 无照片
Hive大数据运维
Hive大数据运维
单栏 · 无照片
Hive配置管理专员
Hive配置管理专员
双栏 · 无照片
Hive自动化运维开发
Hive自动化运维开发
单栏 · 无照片
就从这份模板开始
模板会复制到你的账户里，每一句话、每个板块和颜色都能改，改好再下载 PDF。