IT人力外包人才简历库

返回列表

数据采集开发工程师

驻场外包人员
工作年限:2年 意向城市:北京 浏览:2次 发布时间:近期

技能标签

Python爬虫 JavaScript逆向 数据采集 Scrapy框架 分布式爬虫 异步爬虫 HTML解析 数据存储 API接口 前端分析

专业技能

精通Python编程语言,熟练掌握requests、BeautifulSoup、Scrapy等爬虫框架及第三方库。具备HTML/CSS/JavaScript基础,能够进行前端页面结构解析与动态内容抓取。掌握JavaScript逆向分析技术,可解析前端加密参数及动态渲染内容。熟悉同步/异步爬虫开发,具备高并发数据采集能力。具备网站、移动端APP、微信小程序等多端数据采集经验。熟悉数据存储方案,可将采集结果保存至Excel、文本文件等格式。

工作履历(脱敏处理)

独立完成多个数据采集项目开发,包括体育直播平台直播源采集、土地交易数据采集等。采用JavaScript逆向分析技术破解动态加密参数,构建异步爬虫系统实现高并发数据采集。使用Scrapy框架搭建分布式爬虫架构,提升数据采集效率。开发标准化数据处理流程,将采集结果保存至Excel及文本文件,满足不同业务场景需求。持续优化爬虫算法,提升数据采集稳定性及准确性。

项目经验(脱敏处理)

体育直播平台直播源采集项目:针对体育直播平台动态加密参数解析,采用JavaScript逆向分析技术,成功获取直播源地址,并通过异步爬虫实现高并发数据采集,数据保存至文本文件供后续调用。土地交易数据采集项目:完成土地交易数据采集,通过逆向分析加密参数,利用Scrapy框架构建分布式爬虫系统,实现数据自动抽取并存储至Excel表格,提升数据处理效率。移动端APP数据采集项目:开发APP数据采集方案,解析动态渲染内容,建立稳定的数据采集管道,确保数据实时性与完整性。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

2年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接