IT人力外包人才简历库

返回列表

Python数据爬虫开发工程师

驻场外包人员
工作年限:1年 意向城市:杭州 浏览:2次 发布时间:近期

技能标签

Python开发 数据爬虫 反爬虫策略 游戏逆向工程 内存读写 数据库操作 API接口开发 Linux系统 Docker部署 网络协议分析 数据清洗 代理IP池 请求头模拟 插件开发 容器化技术

专业技能

精通Python编程语言,掌握Scrapy框架实现高效数据抓取。熟悉网络请求协议与反爬虫策略,具备代理IP池搭建与请求头模拟能力。了解游戏逆向工程基础,掌握内存读写技术与游戏插件开发。熟悉MySQL数据库操作与数据清洗流程,具备Linux环境部署与调试能力。熟悉RESTful API接口开发与调试,了解Docker容器化部署技术。

工作履历(脱敏处理)

作为初级开发工程师,主要负责数据爬虫系统开发与游戏插件维护工作。独立完成Scrapy爬虫框架搭建,实现多源数据抓取与反爬虫策略配置,成功突破目标网站的验证码识别机制。参与游戏插件开发项目,运用内存读写技术实现游戏数据监控功能,提升插件稳定性30%。负责MySQL数据库优化,通过索引调整与查询优化提升数据处理效率40%。配合运维团队完成Linux服务器部署与Docker容器化改造,实现服务快速扩展能力。持续学习RESTful API开发与微服务架构知识,为后续项目技术升级做准备。

项目经验(脱敏处理)

主导数据爬虫项目开发,针对目标网站的动态渲染页面,采用Selenium配合Playwright实现无头浏览器自动化,通过代理IP池和请求头模拟技术突破反爬限制,日均抓取数据量达50万条。参与游戏插件开发项目,基于内存读写技术实现游戏数据监控功能,解决游戏进程注入问题,提升插件稳定性。开发反爬虫系统,通过分析目标网站的请求频率和IP封禁策略,设计分布式爬虫架构,成功降低被封禁风险70%。优化数据清洗流程,使用Pandas进行数据去重与格式标准化处理,提升数据质量并降低存储成本。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接