IT人力外包人才简历库

返回列表

大数据开发工程师

驻场外包人员
工作年限:5年 意向城市:北京 浏览:5次 发布时间:近期

技能标签

Java Scala Python Linux Shell SQL Hadoop Spark HBase Hive SpringBoot 数据仓库 集群部署 数据处理 ETL 分布式计算

专业技能

精通Java、Scala、Python编程语言,具备扎实的算法与数据结构基础。熟悉Linux系统运维及Shell脚本开发,掌握SQL语言及数据库优化技术。深入理解Hadoop生态体系,精通Spark、HBase、Hive等大数据处理框架。具备大数据集群部署与调优经验,熟悉CDH集群架构设计与实施。熟练使用SpringBoot框架进行企业级应用开发,熟悉数据仓库建模与ETL流程设计。

工作履历(脱敏处理)

专注于大数据平台架构设计与开发,主导企业级CDH集群部署,优化数据处理流程,提升系统性能。主导某电商平台用户行为分析系统开发,采用Spark进行实时数据处理,实现数据处理效率提升40%。参与某金融行业风控系统建设,设计分布式数据仓库架构,完成ETL流程优化,使数据处理时效提升35%。具备丰富的SpringBoot项目开发经验,独立完成多个微服务架构系统开发,实现业务模块解耦与系统扩展性提升。

项目经验(脱敏处理)

项目一:某电商平台用户行为分析系统

采用Spark Streaming构建实时数据处理管道,设计基于Hive的数仓分层架构,通过优化MapReduce任务调度策略,解决数据倾斜问题,使数据处理效率提升40%。主导CDH集群部署,配置高可用架构,实现资源利用率提升30%,支持日均10亿级数据处理。

项目二:金融行业风控系统建设

设计分布式数据仓库架构,使用HBase存储实时风控数据,通过Spark SQL进行复杂业务规则计算,构建实时预警系统。优化Hive查询性能,采用分区表与索引技术,使报表生成时间缩短60%。开发数据质量监控模块,实现数据异常自动预警,提升系统稳定性。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

5年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接