IT人力外包人才简历库

返回列表

数据采集与处理工程师

驻场外包人员
工作年限:1年 意向城市:杭州 浏览:3次 发布时间:近期

技能标签

Python开发 网络爬虫 深度学习框架 分布式系统 数据库优化 反爬虫策略 数据存储 模型训练 代码规范 系统架构

专业技能

精通Python语言开发(熟悉PEP8规范,具备代码可维护性),擅长网络爬虫开发(Scrapy、BeautifulSoup框架,支持反爬虫策略),掌握深度学习框架(TensorFlow/PyTorch,模型训练与调优),熟悉分布式系统架构设计,具备数据库优化经验(MySQL集群部署与调优)

工作履历(脱敏处理)

主要负责数据采集系统的开发与维护,设计并实现基于Scrapy框架的分布式爬虫系统,支持多源数据抓取与反爬虫策略。主导MySQL集群存储方案设计,通过分库分表优化查询性能。参与深度学习模型的预处理阶段,使用PyTorch框架实现数据特征提取。持续优化系统架构,提升数据处理效率25%,降低运维成本15%。

项目经验(脱敏处理)

负责搭建分布式数据采集系统,使用Scrapy框架实现多源数据抓取,日均处理数据量达10万条;设计MySQL集群存储方案,通过分库分表优化查询性能,降低数据存储成本30%。解决反爬虫机制,采用动态IP代理和请求头模拟,提升数据采集效率。开发数据预处理模块,使用PyTorch框架实现特征提取,为深度学习模型训练提供高质量数据集。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接