技能标签
专业技能
精通Java/Scala开发,擅长分布式计算框架(Hadoop/Spark/Flink),掌握实时数据处理(Kafka/Flink),熟悉数据仓库架构(Hive/HBase),具备ETL开发能力(MapReduce/Spark SQL),精通搜索引擎技术(Elasticsearch),具备高并发系统设计经验
工作履历(脱敏处理)
专注于大数据平台研发与架构优化,主导构建企业级用户画像系统,实现4亿级用户数据处理。设计分布式数据处理架构,采用Hadoop生态进行离线计算,结合Flink实现实时数据处理,通过Kafka实现数据采集。搭建数据仓库体系,完成数据清洗、ETL流程开发及多维分析模型构建。优化任务调度系统,提升整体数据处理效率30%。具备丰富的分布式系统设计经验,擅长解决数据倾斜、容错机制等技术难题,持续优化系统稳定性与可扩展性。
项目经验(脱敏处理)
企业级用户画像系统开发:基于Hadoop生态构建离线数据处理平台,采用Spark进行数据清洗与特征计算,使用Flink实现实时数据采集与处理。设计高可用架构,通过Kafka实现数据缓冲,解决数据倾斜问题,提升系统吞吐量。开发数据仓库体系,完成维度建模与多维分析模型,支持推荐系统核心算法需求。大数据平台集群运维:搭建分布式计算集群,优化Hadoop/Spark资源调度策略,实现集群利用率提升25%。设计任务调度框架,集成Airflow实现作业编排,降低运维复杂度。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
5年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接