IT人力外包人才简历库

返回列表

Python开发工程师(爬虫与桌面应用方向)

驻场外包人员
工作年限:2年 意向城市:杭州 浏览:2次 发布时间:近期

技能标签

Python开发 爬虫系统 Delphi桌面开发 数据库优化 Linux运维 数据清洗 API接口 多线程处理 系统部署 GUI设计 数据存储 网络请求 脚本开发 性能优化 跨平台开发

专业技能

精通Python语言开发,具备爬虫系统架构设计能力,熟悉Scrapy、BeautifulSoup等爬虫框架,掌握数据清洗与存储技术。熟练使用Delphi进行Windows桌面应用开发,具备GUI界面设计及多线程处理经验。熟悉MySQL/PostgreSQL数据库设计与优化,了解Redis缓存技术。具备Linux系统部署与运维能力,熟悉Shell脚本编写。熟悉RESTful API接口开发与调试,具备跨平台数据交互经验。

工作履历(脱敏处理)

主导开发某数据采集平台,采用Scrapy框架构建分布式爬虫系统,日均处理数据量超50万条,通过异步IO和分布式任务队列提升采集效率300%。设计并实现桌面端数据可视化系统,采用Delphi开发GUI界面,集成SQLite数据库实现本地数据缓存,支持多线程数据处理与实时更新。优化数据库索引结构,将数据查询响应时间缩短至200ms以内。搭建Linux服务器环境,配置Nginx反向代理与防火墙规则,实现系统7x24小时稳定运行。开发自动化部署脚本,降低系统维护成本40%。

项目经验(脱敏处理)

1. 数据采集平台开发:基于Scrapy框架构建分布式爬虫系统,采用Redis队列实现任务分发,通过代理IP池解决反爬问题,日均采集数据50万条,数据清洗准确率达99.8%。采用MongoDB存储结构化数据,设计数据分表策略提升查询效率。

2. 桌面应用开发:使用Delphi开发跨版本Windows客户端,实现数据可视化展示与本地缓存功能,采用多线程架构提升响应速度,支持实时数据更新与导出。设计数据库连接池优化数据库访问性能,通过内存映射技术提升大数据量处理效率。

3. 系统优化项目:对现有爬虫系统进行性能调优,通过异步IO和连接池技术将采集效率提升3倍,重构数据处理模块降低内存占用,采用日志分析工具定位并解决数据异常问题,系统稳定性提升至99.9%。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

2年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接