IT人力外包人才简历库

返回列表

数据采集工程师

驻场外包人员
工作年限:1年 意向城市:杭州 浏览:2次 发布时间:近期

技能标签

Python 数据采集 网络爬虫 反爬策略 动态渲染 分布式爬虫 数据清洗 JavaScript逆向解析 Selenium Playwright 正则表达式 API接口调试 数据存储 数据库管理 网络协议分析

专业技能

精通网络爬虫开发与数据采集技术,擅长处理动态渲染页面及反爬策略。熟练使用Python语言及requests、BeautifulSoup等工具进行数据抓取,具备JavaScript逆向解析能力。熟悉分布式爬虫架构设计,掌握Selenium/Playwright等自动化工具。擅长数据清洗、存储及可视化分析,熟悉MySQL/Redis等数据库技术。具备API接口调试及网络协议分析能力,熟悉HTTP/HTTPS协议及数据加密解密技术。

工作履历(脱敏处理)

专注于网络爬虫开发及数据采集系统建设,主导完成多个高并发数据抓取项目。设计并实现分布式爬虫架构,提升数据采集效率300%。开发JavaScript逆向解析模块,成功突破动态渲染页面的数据抓取难题。搭建自动化数据清洗管道,实现数据质量提升95%。优化反爬策略,降低被封禁风险至5%以下。主导API接口调试及数据存储方案设计,支持日均千万级数据处理。

项目经验(脱敏处理)

1. 某视频平台内容采集系统:采用Selenium+Playwright实现动态渲染页面数据抓取,设计分布式爬虫架构,日均采集200万条视频数据。2. 某社交平台用户画像采集:通过JavaScript逆向解析技术突破加密数据,构建用户行为分析模型。3. 房产信息采集平台:开发分布式爬虫系统,实现全国主要房产网站数据同步,日均处理50万条房源信息。4. 金融数据采集系统:设计API接口调试方案,完成股票市场实时数据采集,支持分钟级数据更新。5. 多平台内容聚合系统:整合视频、社交、新闻等多源数据,构建数据清洗管道,实现99.9%的数据准确率。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接