IT人力外包人才简历库

返回列表

Python数据采集与分析工程师

驻场外包人员
工作年限:3年 意向城市:北京 浏览:2次 发布时间:近期

技能标签

Python开发 Scrapy框架 数据可视化 数据库管理 Linux运维 数据建模 Pandas分析 Matplotlib Django开发 API设计 ETL处理 数据清洗 BI报表 分布式爬虫 数据建模 技术文档

专业技能

精通Python编程语言及数据处理框架,熟悉Scrapy分布式爬虫架构,掌握MySQL/Redis/MongoDB多数据库系统,具备Linux服务器运维能力。熟练使用Pandas进行数据清洗与分析,擅长Matplotlib/Seaborn数据可视化工具,具备数据建模与BI报表开发经验,熟悉Django开发框架及RESTful API设计

工作履历(脱敏处理)

主要负责企业级数据采集系统的开发与维护,主导设计并实现基于Scrapy的分布式爬虫架构,支持日均百万级数据采集。开发数据处理ETL流程,利用Pandas进行数据清洗与特征工程,构建数据模型并输出可视化BI报表。优化MySQL数据库索引结构,提升查询效率30%。设计并实现基于Django的API接口,支持前端数据可视化展示。编写技术文档与操作手册,建立标准化开发流程,提升团队开发效率。

项目经验(脱敏处理)

1. 构建企业数据采集平台:基于Scrapy框架开发分布式爬虫系统,采用Redis队列实现任务分发,通过MongoDB存储采集数据,日均处理数据量达200万条,系统稳定性提升至99.9%。

2. 数据分析与可视化系统开发:使用Pandas进行数据清洗与特征提取,构建多维数据模型,通过Matplotlib/Seaborn生成动态可视化图表,支持用户自定义报表生成,提升数据决策效率40%。

3. 数据库性能优化项目:对MySQL数据库进行索引优化与查询重构,通过分库分表策略降低单表数据量,使复杂查询响应时间从500ms降至150ms。

4. 自动化运维系统开发:编写Shell脚本实现Linux服务器监控与日志分析,集成Prometheus监控系统,建立自动化告警机制,降低运维人工干预频次60%。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

3年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接