技能标签
专业技能
精通Python编程语言,具备C语言基础,熟悉Django、Flask、FastAPI等Web开发框架,具备RESTful API设计与实现经验。熟练掌握网络爬虫技术,具备使用Scrapy、Scrapy-Redis、XPath等工具进行数据采集与清洗能力。精通MySQL数据库优化技术,熟悉MongoDB非关系型数据库及Redis集群部署方案。熟悉Hadoop生态体系,包括HDFS分布式存储、MapReduce分布式计算、Hive数据仓库及Spark实时计算框架。
工作履历(脱敏处理)
主要负责电商平台后端系统开发与维护,主导完成电商App接口逆向分析项目,通过动态分析与静态逆向技术还原JS加密参数生成逻辑,实现接口调用自动化。开发基于Scrapy-Redis的分布式爬虫系统,日均处理百万级数据量,通过XPath解析与正则表达式清洗实现数据标准化存储。优化MySQL数据库索引结构,使查询效率提升40%,设计MongoDB分片架构支撑日均千万级数据写入。参与Hadoop集群搭建,基于Spark实现用户行为分析实时计算,降低数据处理延迟至秒级。
项目经验(脱敏处理)
电商App接口逆向分析项目:负责电商平台核心接口的逆向工程分析,通过动态调试与静态代码分析技术,成功还原JS加密参数生成算法。设计自动化测试脚本验证接口签名逻辑,实现加密参数的批量解析与验证。采用Scrapy-Redis构建分布式爬虫系统,通过XPath解析与正则表达式清洗,完成商品信息抓取与存储,日均处理数据量达120万条。优化数据存储结构,采用分表分库方案提升系统并发处理能力,使接口响应时间缩短60%。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
1年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接