IT人力外包人才简历库

返回列表

Python爬虫开发工程师

驻场外包人员
工作年限:3年 意向城市:杭州 浏览:2次 发布时间:近期

技能标签

Python Scrapy Django MySQL Redis MongoDB Pandas Matplotlib Linux 数据可视化 数据清洗 ETL 分布式爬虫 数据建模 数据库优化

专业技能

精通Python编程语言及Scrapy分布式爬虫框架,熟悉Django全栈开发框架。掌握MySQL、Redis、MongoDB等主流数据库技术,具备分布式系统部署经验。熟练使用Pandas进行数据清洗与分析,精通Matplotlib/Seaborn数据可视化工具。具备Linux服务器运维能力,熟悉ETL流程与数据建模方法论。

工作履历(脱敏处理)

专注于Python开发领域,3年累计完成15+数据采集项目。主导搭建分布式爬虫系统,处理反爬机制与数据去重问题,实现日均百万级数据采集。基于Django开发数据可视化平台,集成Pandas与Matplotlib完成多维数据分析。优化MySQL索引结构,使查询效率提升40%。主导Redis缓存架构设计,降低系统响应延迟。具备完整项目生命周期管理经验,从需求分析、技术选型到部署维护全流程把控。

项目经验(脱敏处理)

1. 构建电商数据采集系统:采用Scrapy-Redis实现分布式爬虫,通过IP代理池和请求头随机化应对反爬策略,日均采集商品数据50万条。使用Pandas进行数据清洗,构建商品属性分析模型,输出可视化报表。2. 用户行为分析平台开发:基于Django搭建数据中台,整合MySQL与MongoDB存储结构化与非结构化数据。设计ETL流程实现用户路径分析,使用Matplotlib生成多维用户画像图表。3. 实时数据监控系统:开发基于Redis的实时数据采集模块,通过消息队列实现数据异步处理,构建可视化监控大屏展示系统运行状态。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

3年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接