技能标签
专业技能
精通Python数据清洗与分析,熟练掌握Pandas数据处理框架。具备PyQt5 GUI开发能力,可实现数据可视化交互界面。熟悉MongoDB、MySQL、Redis等多类型数据库设计与优化。掌握Selenium自动化爬虫技术,擅长VBA实现办公自动化脚本开发。具备分布式爬虫架构设计能力,熟悉ETL数据清洗流程与数据质量管控体系。
工作履历(脱敏处理)
长期从事数据工程开发工作,主导设计分布式爬虫系统实现工信部备案数据自动采集,构建多源数据清洗管道提升数据可用性。开发企业信息爬虫平台,实现日均百万级数据采集与入库。主导苏州市反诈项目数据研判系统建设,通过规则引擎实现数据智能分析与预警推送。设计可视化数据看板系统,基于PyQt5开发交互式界面,实现数据多维分析与可视化展示。持续优化数据库架构,通过Redis缓存与MySQL分库分表方案提升系统性能。
项目经验(脱敏处理)
1. 工信部备案数据采集系统:设计分布式爬虫架构,采用Selenium实现动态网页数据抓取,构建基于Pandas的ETL数据清洗流程,日均处理数据量达200万条。2. 企业信息智能爬虫平台:开发多线程爬虫框架,实现企业工商信息、资质证书等数据自动采集,建立数据质量校验机制确保数据准确性。3. 反诈数据研判系统:构建数据清洗-分析-推送闭环,通过规则引擎实现异常数据智能识别,建立数据预警推送机制,提升反诈响应效率30%。4. 数据可视化看板系统:基于PyQt5开发交互式界面,集成数据可视化组件,实现多维度数据分析与报表生成,提升数据使用效率。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
5年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接