IT人力外包人才简历库

返回列表

大数据研发工程师

驻场外包人员
工作年限:5年 意向城市:杭州 浏览:4次 发布时间:近期

技能标签

Java开发 Scala编程 Hadoop生态 Spark计算框架 Flink流处理 Kafka消息队列 Hive数据仓库 HBase存储系统 Elasticsearch搜索 MapReduce分布式计算 数据仓库建模 ETL开发 高并发系统设计 实时数据处理

专业技能

精通Java/Scala开发,擅长分布式计算框架(Hadoop/Spark/Flink),掌握实时数据处理(Kafka/Flink),熟悉数据仓库架构(Hive/HBase),具备ETL开发能力(MapReduce/Spark SQL),精通搜索引擎技术(Elasticsearch),具备高并发系统设计经验

工作履历(脱敏处理)

专注于大数据平台研发与架构优化,主导构建企业级用户画像系统,实现4亿级用户数据处理。设计分布式数据处理架构,采用Hadoop生态进行离线计算,结合Flink实现实时数据处理,通过Kafka实现数据采集。搭建数据仓库体系,完成数据清洗、ETL流程开发及多维分析模型构建。优化任务调度系统,提升整体数据处理效率30%。具备丰富的分布式系统设计经验,擅长解决数据倾斜、容错机制等技术难题,持续优化系统稳定性与可扩展性。

项目经验(脱敏处理)

企业级用户画像系统开发:基于Hadoop生态构建离线数据处理平台,采用Spark进行数据清洗与特征计算,使用Flink实现实时数据采集与处理。设计高可用架构,通过Kafka实现数据缓冲,解决数据倾斜问题,提升系统吞吐量。开发数据仓库体系,完成维度建模与多维分析模型,支持推荐系统核心算法需求。大数据平台集群运维:搭建分布式计算集群,优化Hadoop/Spark资源调度策略,实现集群利用率提升25%。设计任务调度框架,集成Airflow实现作业编排,降低运维复杂度。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

5年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接