技能标签
专业技能
精通Python编程语言,具备扎实的OOP和函数式编程能力,熟练掌握Django/Flask/FastAPI全栈开发框架。熟悉网络爬虫技术体系,具备requests、Scrapy、Scrapy-Redis等工具链实战经验,擅长数据清洗、ETL处理及多源数据存储方案设计。精通MySQL数据库优化技术,掌握索引优化、查询调优及主从架构设计。熟悉MongoDB分片集群部署及Redis分布式缓存方案。具备Hadoop生态体系(HDFS、MapReduce、Hive、Spark)大数据处理经验。
工作履历(脱敏处理)
作为Python开发工程师,主导电商App接口逆向分析项目,完成JS加密参数还原及接口签名生成逻辑的完整技术方案。设计基于Scrapy-Redis的分布式爬虫架构,实现千万级数据抓取与清洗处理。搭建MySQL主从架构并优化复杂查询性能,使数据库响应时间降低40%。基于Hadoop生态构建数据处理流水线,实现日均10TB数据的ETL处理。主导Redis集群部署方案,设计分布式缓存策略提升系统吞吐量30%。
项目经验(脱敏处理)
电商App接口逆向分析项目:负责App接口签名生成逻辑的逆向工程,通过动态分析工具还原JS加密算法,设计数据清洗管道完成百万级数据脱敏处理。采用Scrapy-Redis构建分布式爬虫集群,实现接口参数自动化采集与存储。开发基于MongoDB分片集群的存储方案,支持千万级数据的高效读写。通过Redis缓存策略优化接口响应速度,降低后端数据库压力。项目成果实现接口参数自动化采集,支撑业务方完成数据埋点分析。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
1年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接