跳到正文
熊猫简历

登录 / 注册

微信扫码、手机号或邮箱验证码登录,新用户自动注册。

高级爬虫工程师简历模板

  • 单栏
  • A4
  • 有照片
  • ATS
上传我的简历

高级爬虫工程师

熊帅帅

高级爬虫工程师
phone138 0013 8000
city杭州
gender男
job_status在职-考虑机会
intended_city杭州
max_salary25-35K
头像
个人总结

6年Python爬虫与数据采集经验,专注大规模分布式爬虫架构、反爬对抗与数据清洗入库,熟悉Scrapy、Playwright、Kafka等技术栈。主导过日均千万级请求的采集平台建设,将采集成功率提升至98%以上。具备团队带教与合规采集方案设计经验。

技能
Python / Scrapy / Playwright
分布式爬虫与调度(Redis、Celery、Kafka)
反爬对抗与验证码识别
MySQL / MongoDB / Redis 数据存储
Linux / Docker / K8s 部署运维
数据清洗与ETL(Pandas、Airflow)
工作经历
杭州云数智能科技有限公司
大数据互联网
杭州
高级爬虫工程师
分布式爬虫反爬对抗
2022年9月 - 至今
  • 负责分布式采集平台架构设计与迭代,支撑日均1200万级请求,采集成功率由91%提升至98.5%。
  • 主导反爬对抗方案建设,引入代理池与指纹伪装,目标站点封禁率下降60%。
  • 带教3名初级工程师,制定采集规范与合规审核流程,季度线上事故降为0。
上海数聚信息技术有限公司
企业服务数据采集
上海
Python爬虫工程师
Scrapy数据清洗
2020年7月 - 2022年8月
  • 使用Scrapy与Playwright开发多站点采集任务,覆盖电商、资讯类站点80余个。
  • 设计数据清洗与去重流程,入库数据准确率提升至99%,下游报表返工减少70%。
  • 搭建任务监控告警体系,异常发现时间从小时级缩短至5分钟内。
项目经验
千万级分布式采集调度平台 - 技术负责人
2024年3月 - 2024年5月
  • 基于Scrapy-Redis与Kafka重构调度架构,支持200+节点横向扩展,吞吐提升3倍。
  • 引入动态限速与失败重试策略,目标站点封IP率下降55%,运维成本降低30%。
教育背景
浙江工业大学
一本省重点
杭州
计算机科学与技术 本科
2016年8月 - 2020年5月

主修数据结构、计算机网络、数据库系统;CET-6,普通话二级甲等。

证书与认证
软件设计师(软考中级) - 工业和信息化部
2021年5月

证明软件设计与系统开发能力。

阿里云云计算工程师认证(ACP) - 阿里云
2023年9月

证明云上部署与运维能力。

主要成就
采集效率突破

主导调度架构重构,平台吞吐量提升3倍,支撑业务数据日更需求。

合规采集体系

牵头制定采集合规审核流程,全年无数据合规投诉。

团队带教

培养3名初级工程师独立负责采集模块,团队交付效率提升40%。

更多爬虫工程师模板

同一职位,不同的版式和写法。点开任意一份即可查看大图。

查看全部 23 份

就从这份模板开始

模板会复制到你的账户里,每一句话、每个板块和颜色都能改,改好再下载 PDF。

上传我的简历