IT人力外包人才简历库

返回列表

大数据开发工程师

驻场外包人员
工作年限:3年 意向城市:北京 浏览:2次 发布时间:近期

技能标签

Python开发 Spark大数据处理 机器学习建模 深度学习框架 数据可视化 模型服务化 SQL优化 Hadoop生态 数据清洗 分布式计算

专业技能

精通Python编程语言,熟练掌握Pandas、NumPy进行高效数据清洗与规整,具备复杂SQL查询与优化能力。深入理解Hadoop生态体系,擅长使用Spark进行分布式数据处理与计算优化。熟悉机器学习全流程,包括特征工程、模型训练与评估,精通Scikit-learn框架及TensorFlow/PyTorch深度学习框架。掌握数据可视化工具链(Matplotlib、Seaborn、Tableau),具备模型服务化部署经验(Flask/FastAPI)。熟悉Git版本控制与Linux系统运维,具备大数据平台架构设计与调优能力。

工作履历(脱敏处理)

专注于大数据平台开发与数据科学工程化实践,主导构建新闻资讯分类系统,实现百万级文本数据的分布式处理与特征工程。采用Spark DataFrame API优化数据读取效率,通过TF-IDF特征提取与多分类模型对比实验,最终部署92%准确率的朴素贝叶斯分类器。设计并实现基于Flask的模型服务化接口,完成从数据预处理到模型推理的全流程自动化。持续优化数据处理Pipeline,通过参数调优与算法迭代提升系统吞吐量30%。具备大数据平台架构设计能力,熟悉数据仓库建模与ETL流程,能够结合业务需求制定数据解决方案。

项目经验(脱敏处理)

主导开发新闻主题分类系统,构建覆盖数据采集、特征工程、模型训练与部署的完整数据科学流程。基于Spark分布式计算框架,设计并实现百万级文本数据的并行处理架构,通过DataFrame API优化数据读取效率,将预处理阶段耗时降低40%。采用Scikit-learn构建TF-IDF特征向量化方案,对比实验朴素贝叶斯、SVM等多分类模型,通过网格搜索优化参数配置,最终实现92%的测试集准确率。探索深度学习方案,基于预训练词向量模型进行BERT等NLP模型的微调实验,验证传统机器学习在文本分类任务中的实际效果。完成模型服务化部署,通过Flask构建REST API接口,实现模型推理的自动化集成,支撑实时新闻分类需求。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

3年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接