IT人力外包人才简历库

返回列表

大数据开发工程师(驻场)

驻场外包人员
工作年限:2年 意向城市:杭州 浏览:3次 发布时间:近期

技能标签

Hadoop Spark HDFS HBase MySQL Java Python Linux 数据中台 ETL 数据仓库 分布式存储 数据治理 Hive Sqoop

专业技能

精通Hadoop生态体系(HDFS/Hive/MapReduce),掌握分布式存储架构设计与优化;熟悉关系型数据库(MySQL)与NoSQL数据库(HBase)的混合存储方案;精通Java开发语言(Spring Boot/Java 8+)及Python数据处理脚本;具备Linux系统运维能力,熟悉Shell/Python自动化运维脚本开发;熟悉数据仓库建设与ETL流程优化

工作履历(脱敏处理)

主导某数据中台项目架构设计,完成数据采集、清洗、存储及分析全流程开发,实现数据孤岛整合,提升数据利用率30%。设计分布式存储方案,优化HDFS文件系统性能,降低存储成本20%。开发ETL数据处理流程,采用Spark进行数据并行计算,处理效率提升5倍。构建数据仓库分层架构(ODS/DWD/DWS),实现多维数据查询响应时间缩短至500ms以内。开发自动化运维脚本,实现服务器部署效率提升40%。

项目经验(脱敏处理)

数据中台架构设计与开发:基于Hadoop生态构建统一数据中台,实现多源数据整合。采用HDFS进行海量数据存储,通过Hive进行数据仓库建模,设计ETL流程完成数据清洗与聚合。解决数据一致性问题,通过分布式锁机制保障数据同步可靠性。优化MapReduce计算任务,采用Combiner和分区策略提升计算效率。开发数据可视化看板,基于HBase构建实时数据查询接口,支持分钟级数据更新。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

2年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接