Hive系统运维
Hive系统运维
双栏 · 无照片
Hive资源管理工程师
教育背景
浙江工业大学
一本省重点
计算机科学与技术 本科
杭州2016年9月 - 2020年6月
主修数据库系统、分布式计算、操作系统；毕业设计为基于Hadoop的日志分析平台。
技能
Hive SQL 调优
HDFS/YARN 资源管理
Spark
数据仓库建模
Linux Shell/Python
调度平台（DolphinScheduler/Azkaban）
个人总结
5年大数据平台开发与运维经验，专注Hive数据仓库建设与资源治理，熟悉HDFS、YARN、Hive Metastore及调度体系。主导集群资源队列划分与容量优化，支撑日均TB级离线任务稳定运行。擅长SQL调优、小文件治理与成本控制，具备较强的故障排查和跨团队协作能力。
工作经历
杭州云数智联科技有限公司
杭州
大数据服务互联网
Hive资源管理工程师
2022年9月 - 至今
HiveYARN
- 负责Hive数仓集群资源治理，按业务线划分YARN队列并配置弹性配额，集群平均利用率由58%提升至76%。
- 主导小文件合并与分区表改造，将核心报表任务平均运行时长缩短35%，日均节省计算资源约1200核时。
- 建立慢任务巡检与SQL审核机制，季度内拦截高风险全表扫描任务60余个，保障集群稳定性。
浙江数聚信息技术有限公司
杭州
企业数据软件服务
大数据开发工程师
2020年7月 - 2022年8月
数据仓库ETL
- 参与Hive数据仓库分层建设，完成ODS到DWD层约200张表的建模与上线，支撑业务报表需求交付。
- 负责日常任务运维与故障处理，将数据产出延迟告警率从每月15次降至4次以内。
项目经验
Hive集群资源队列优化项目
2023年3月 - 2024年6月
技术负责人
- 针对集群资源争抢问题，重新设计队列层级与权重策略，核心业务SLA达成率由92%提升至99%。
- 推动冷热数据分层存储，将历史分区迁移至低频存储，年度存储成本下降约18%。
离线数仓小文件治理专项
2022年10月 - 2023年1月
核心开发
- 设计分区裁剪与文件合并方案，治理小文件超百万级，NameNode内存压力下降约30%。
- 输出SQL开发规范并组织培训，团队慢查询数量环比减少40%。
主要成就
集群稳定性保障
牵头完成集群资源治理方案，支撑日均3万+离线任务稳定运行，全年无重大集群故障。
成本优化成果
通过资源优化与存储分层，年度计算与存储成本合计节省约60万元。
其他信息
到岗时间:
可接受短期出差，一个月内到岗。
平台经验:
熟悉阿里云EMR、华为云MRS等托管大数据平台。
证书与认证
阿里云大数据工程师认证（ACP） - 阿里云
2023年6月
证明大数据平台规划与运维能力。
数据库系统工程师（软考中级） - 工业和信息化部
2021年11月
证明数据库设计与SQL优化能力。
语言能力
英语（CET-6）可阅读英文技术文档，日常技术沟通无障碍
更多Hive模板
同一职位，不同的版式和写法。点开任意一份即可查看大图。
Hive与其他系统集成运维
Hive与其他系统集成运维
单栏 · 无照片
Hive数据仓库运维
Hive数据仓库运维
单栏 · 有照片
Hive版本升级运维
Hive版本升级运维
双栏 · 有照片
Hive监控与告警工程师
Hive监控与告警工程师
双栏 · 无照片
Hive大数据运维
Hive大数据运维
单栏 · 无照片
Hive配置管理专员
Hive配置管理专员
双栏 · 无照片
Hive自动化运维开发
Hive自动化运维开发
单栏 · 无照片
就从这份模板开始
模板会复制到你的账户里，每一句话、每个板块和颜色都能改，改好再下载 PDF。