IT人力外包人才简历库

返回列表

数据采集与分析工程师

驻场外包人员
工作年限:10年 意向城市:北京 浏览:3次 发布时间:近期

技能标签

Python 数据爬取 Scrapy Requests BeautifulSoup 数据清洗 ETL 分布式爬虫 实时监控 数据库管理 Linux运维 数据可视化 反爬策略 日志分析 自动化脚本 API接口开发

专业技能

精通Python编程语言(3.8+),擅长数据爬取技术(Scrapy/Requests/BeautifulSoup),具备分布式爬虫框架开发能力,熟悉数据清洗与ETL处理(Pandas/NumPy),掌握MySQL/Redis数据库管理,熟悉Linux系统运维(Shell/Ansible),具备数据可视化分析能力(Matplotlib/Tableau)

工作履历(脱敏处理)

专注于企业级数据采集系统建设,主导设计并实施多平台数据爬取方案,包括电商网站(亚马逊/京东/抖音)及企业内部系统数据采集。开发分布式爬虫框架提升数据采集效率300%,构建实时监控系统实现异常数据自动预警。主导数据清洗与ETL流程优化,建立标准化数据处理规范,提升数据质量达95%。开发自动化分析脚本支持业务决策,实现数据可视化看板,助力企业提升运营效率20%。

项目经验(脱敏处理)

1. 电商数据采集系统:设计分布式爬虫架构,解决反爬机制与动态渲染页面数据抓取问题,实现日均百万级数据采集,采用Redis缓存优化请求频率,提升系统稳定性。2. 企业内部数据整合平台:搭建数据采集-清洗-分析一体化系统,开发ETL流程自动化处理10+业务系统数据,建立数据质量校验机制,确保数据准确性达99.8%。3. 实时监控与预警系统:开发数据采集异常监控模块,集成日志分析与告警通知功能,实现99.99%的系统可用性,降低运维成本40%。4. 多平台数据清洗系统:设计统一数据清洗规范,开发自动化处理脚本,处理结构化/非结构化数据,提升数据可用性至98%,支持多维度数据分析需求。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

10年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接