IT人力外包人才简历库

返回列表

数据采集与分析工程师

驻场外包人员
工作年限:10年 意向城市:成都 浏览:15次 发布时间:近期

技能标签

Python编程 分布式爬虫 反爬虫策略 数据清洗 ETL处理 MySQL MongoDB Scrapy框架 Selenium 数据可视化 日志分析 Linux部署 数据质量管理 数据安全 系统监控

专业技能

精通Python编程语言(精通);掌握分布式数据采集系统设计与开发;熟悉反爬虫机制应对策略;具备数据清洗、ETL处理及数据可视化能力;熟悉MySQL/MongoDB数据库架构设计;熟练使用Scrapy、Selenium、Requests等爬虫框架;具备日志分析与系统监控能力;熟悉Linux服务器环境部署;掌握数据质量评估与异常数据处理方法;具备数据安全与合规性管理经验

工作履历(脱敏处理)

长期从事电商数据采集与分析工作,主导设计分布式爬虫系统应对电商平台反爬机制,优化数据采集效率并建立数据质量评估体系。主导企业内部数据整合项目,实现多源数据清洗与ETL处理流程标准化,提升数据可用性。开发数据可视化分析平台,支持业务部门进行多维度数据挖掘。设计数据安全防护方案,确保数据采集与存储符合合规要求。持续优化爬虫系统架构,提升系统稳定性与可扩展性。

项目经验(脱敏处理)

1. 电商平台分布式爬虫系统开发:设计并实现支持高并发的分布式爬虫架构,通过反爬虫策略优化使数据采集效率提升30%,解决动态渲染页面数据抓取难题。2. 多源数据整合平台建设:主导企业内部数据采集汇总项目,建立标准化数据清洗流程,实现日均千万级数据处理能力。3. 社交电商数据采集系统:开发抖音小店数据爬取系统,采用动态渲染技术应对反爬机制,日均采集数据量达50万条。4. 数据可视化分析平台:构建基于Python的BI分析系统,实现数据可视化展示与多维度分析,支持业务决策优化。5. 数据安全防护体系:设计数据采集安全方案,通过加密传输与访问控制确保数据合规性,通过ISO27001认证。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

10年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接