IT人力外包人才简历库

返回列表

数据采集工程师

驻场外包人员
工作年限:1年 意向城市:杭州 浏览:4次 发布时间:近期

技能标签

Python编程 Scrapy框架 Selenium自动化 异步编程 分布式爬虫 数据库管理 逆向工程 网络爬虫 数据持久化 并发编程 反爬机制 接口调试 数据清洗 日志分析 性能优化

专业技能

精通Python编程语言,熟练掌握Scrapy框架进行分布式爬虫开发,具备Selenium自动化测试框架应用经验。熟悉MySQL、MongoDB及Redis等多类型数据库的存储优化方案,掌握异步编程与并发编程技术。具备PC端及移动端逆向分析能力,熟悉网络协议及反爬机制破解技术。

工作履历(脱敏处理)

专注于网络数据采集系统开发,主导设计并实现分布式爬虫架构,采用Scrapy框架完成多源数据采集与存储优化。开发自动化测试脚本,通过Selenium实现用户登录模拟与数据抓取。设计反爬机制应对策略,成功突破目标网站的流量限制。完成移动端逆向分析,实现APP数据接口调试与功能验证。持续优化采集效率,提升数据处理吞吐量30%以上。

项目经验(脱敏处理)

1. 构建分布式网络爬虫系统,采用Scrapy框架实现增量式数据采集,通过异步编程技术提升并发处理能力,成功采集某影视平台高清视频资源。2. 开发自动化登录系统,利用Selenium框架模拟用户操作,突破目标网站的登录验证机制。3. 实现移动端逆向分析,通过JNI开发技术解析APP数据接口,完成B站播放量模拟及得物搜索功能调试。4. 设计高可用代理IP采集系统,采用多线程技术实现IP地址的批量获取与验证,优化采集策略提升数据可用性。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接