技能标签
专业技能
精通Flink、Spark、Hadoop、Kafka、HBase等大数据核心技术栈，熟悉Lambda架构与流批一体计算框架。掌握Hive、Impala等数据仓库计算引擎，具备Hue、Oozie等大数据开发工具链使用经验。精通Java/Python编程语言，熟悉SQL优化与分布式计算原理。具备Linux系统运维能力，熟悉Flume、Kettle等数据集成工具。熟悉数据治理、元数据管理、数据质量管理等数据资产管理能力。
工作履历（脱敏处理）
主导企业级数据仓库建设，完成核心数仓分层架构设计与业务域模型抽象，构建可复用的通用代码库提升开发效率。推动数据中台工程化实施，实现SQL化开发与工具链标准化，提升系统稳定性30%。设计并开发多源异构数据采集平台，支持实时与离线数据融合，搭建分布式数据清洗引擎，日均处理数据量达PB级。主导数据治理平台研发，实现元数据管理、数据质量监控等核心功能，建立统一数据资产管理体系。
项目经验（脱敏处理）
1. 数仓平台建设：基于Lambda架构设计分层数据仓库，构建ODS/DWD/DWS多层模型体系，开发通用数据处理组件库。通过SQL化开发降低开发复杂度，实现代码复用率提升40%。采用Oozie调度框架实现作业流程化管理，系统稳定性提升至99.9%。
2. 大数据基础平台开发：设计支持多源数据接入的分布式采集系统，集成Flume与Kafka实现实时数据管道。开发基于Spark的分布式清洗引擎，支持复杂ETL流程，处理性能提升5倍。构建集群监控体系，实现资源利用率优化25%。
3. 数据治理平台研发：开发元数据管理系统，支持数据血缘追踪与版本管理。构建数据质量监控体系，实现数据准确率提升至99.8%。设计数据资产目录系统，建立统一的数据标准与分类体系，提升数据使用效率35%。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
10年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求，欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接