IT人力外包人才简历库

返回列表

数据采集与分析工程师

驻场外包人员
工作年限:5年 意向城市:杭州 浏览:2次 发布时间:近期

技能标签

Python Pandas PyQt5 MongoDB MySQL Redis Selenium VBA 数据清洗 ETL 爬虫架构 数据可视化 自动化脚本 分布式系统 数据质量管控

专业技能

精通Python数据清洗与分析,熟练掌握Pandas数据处理框架。具备PyQt5 GUI开发能力,可实现数据可视化交互界面。熟悉MongoDB、MySQL、Redis等多类型数据库设计与优化。掌握Selenium自动化爬虫技术,擅长VBA实现办公自动化脚本开发。具备分布式爬虫架构设计能力,熟悉ETL数据清洗流程与数据质量管控体系。

工作履历(脱敏处理)

长期从事数据工程开发工作,主导设计分布式爬虫系统实现工信部备案数据自动采集,构建多源数据清洗管道提升数据可用性。开发企业信息爬虫平台,实现日均百万级数据采集与入库。主导苏州市反诈项目数据研判系统建设,通过规则引擎实现数据智能分析与预警推送。设计可视化数据看板系统,基于PyQt5开发交互式界面,实现数据多维分析与可视化展示。持续优化数据库架构,通过Redis缓存与MySQL分库分表方案提升系统性能。

项目经验(脱敏处理)

1. 工信部备案数据采集系统:设计分布式爬虫架构,采用Selenium实现动态网页数据抓取,构建基于Pandas的ETL数据清洗流程,日均处理数据量达200万条。2. 企业信息智能爬虫平台:开发多线程爬虫框架,实现企业工商信息、资质证书等数据自动采集,建立数据质量校验机制确保数据准确性。3. 反诈数据研判系统:构建数据清洗-分析-推送闭环,通过规则引擎实现异常数据智能识别,建立数据预警推送机制,提升反诈响应效率30%。4. 数据可视化看板系统:基于PyQt5开发交互式界面,集成数据可视化组件,实现多维度数据分析与报表生成,提升数据使用效率。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

5年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接