爬虫数据工程师
爬虫数据工程师
单栏 · 有照片
爬虫测试工程师
教育背景
杭州电子科技大学
双非计算机类
软件工程 本科
杭州2017年9月 - 2021年6月
相关课程：数据结构、计算机网络、Python程序设计、软件测试技术。
技能
Python（Scrapy、Requests、Asyncio）
Selenium / Playwright 自动化测试
Pytest / 接口自动化与Mock
MySQL / Redis 数据校验
Linux / Docker / Jenkins CI
抓包与反爬分析（Fiddler、mitmproxy）
个人总结
3年爬虫与测试开发经验，熟悉Scrapy、Selenium、Playwright及接口自动化，能独立完成反爬策略验证与数据质量校验。曾主导测试覆盖率提升至92%，年节省回归测试工时约600小时。熟悉Linux与Docker环境，具备CI/CD测试落地经验。
工作经历
杭州数聚科技有限公司
杭州
数据服务互联网
爬虫测试工程师
2022年9月 - 至今
自动化测试爬虫监控
- 负责20余个数据采集任务的测试与监控，累计发现并修复反爬相关缺陷80余个，采集成功率由91%提升至98%。
- 搭建基于Pytest的接口自动化回归框架，覆盖1200个用例，回归测试工时每周缩减约12小时。
- 推动采集任务接入Jenkins流水线并配置质量门禁，版本上线前缺陷漏出率下降约35%。
杭州云图网络技术有限公司
杭州
电商数据采集
测试工程师
2020年7月 - 2022年8月
功能测试UI自动化
- 负责电商数据采集接口的功能与兼容性测试，上线前拦截采集失败与数据错位问题60余条。
- 使用Selenium与Playwright编写UI自动化脚本200余条，页面回归效率提升约40%。
- 建立数据一致性校验脚本，发现字段缺失与重复采集问题，数据准确率提升至99.2%。
项目经验
多源招聘数据采集与质量校验平台
2024年3月 - 2024年5月
测试负责人
- 设计覆盖反爬、限流、验证码场景的测试用例集，累计执行300余条，核心链路测试覆盖率达95%。
- 引入mitmproxy做抓包回放，将异常采集问题定位时间从平均2小时缩短至30分钟。
主要成就
采集成功率提升
通过缺陷治理与监控告警，采集成功率由91%提升至98%，线上采集故障月均下降约60%。
自动化框架落地
主导搭建Pytest接口自动化框架，覆盖1200个用例，回归测试工时每周节省约12小时。
质量门禁建设
推动采集任务接入Jenkins质量门禁，版本上线前缺陷漏出率下降约35%。
证书与认证
软件评测师（软考中级） - 工业和信息化部
2022年11月
证明软件测试与质量保障能力。
阿里云ACA大数据助理工程师 - 阿里云
2024年4月
证明云上数据采集与处理基础能力。
更多爬虫工程师模板
同一职位，不同的版式和写法。点开任意一份即可查看大图。
爬虫优化工程师
爬虫优化工程师
单栏 · 有照片
AI辅助爬虫工程师
AI辅助爬虫工程师
单栏 · 无照片
爬虫工程师
爬虫工程师
单栏 · 无照片
大数据爬虫工程师
大数据爬虫工程师
双栏 · 有照片
python爬虫工程师
python爬虫工程师
单栏 · 有照片
爬虫架构师
爬虫架构师
单栏 · 有照片
python爬虫工程师实习生
python爬虫工程师实习生
单栏 · 无照片
就从这份模板开始
模板会复制到你的账户里，每一句话、每个板块和颜色都能改，改好再下载 PDF。