IT人力外包人才简历库

返回列表

数据采集与爬虫工程师

驻场外包人员
工作年限:1年 意向城市:杭州 浏览:2次 发布时间:近期

技能标签

Python 爬虫技术 数据采集 反爬策略 正则表达式 XPath解析 数据清洗 分布式爬虫 数据可视化 网络请求 异步编程 Linux运维 数据预处理 动态网页抓取 网络协议分析

专业技能

精通Python编程语言,熟练掌握网络请求技术(requests/urllib)、数据解析技术(XPath/正则表达式/BS4)、分布式爬虫框架(Scrapy)。深入理解反爬虫机制(字体反爬/JS逆向/图片验证),具备动态页面数据抓取能力(Selenium)。熟悉数据清洗与预处理技术(Pandas/Numpy),掌握数据可视化工具(Matplotlib)。具备多线程/异步编程能力,熟悉Linux环境部署与监控。

工作履历(脱敏处理)

专注于数据采集系统开发与维护,主导设计并实现多源数据采集方案,日均处理数据量超50万条。优化反爬策略,成功突破30+网站的反爬机制,提升数据采集效率40%。开发数据清洗模块,构建标准化数据处理流程,提升数据质量达标率至98%。设计分布式爬虫架构,采用Scrapy-Redis实现任务分发与结果聚合,系统吞吐量提升3倍。持续优化网络请求策略,降低请求失败率至5%以下。

项目经验(脱敏处理)

某互联网公司数据采集项目:设计并实现多源数据采集系统,处理动态网页反爬机制(字体反爬/JS逆向/图片验证),日均采集数据50万+条。采用Scrapy-Redis构建分布式爬虫架构,通过任务分发与结果聚合提升系统吞吐量3倍。开发数据清洗模块,构建标准化数据处理流程,提升数据质量达标率至98%。优化网络请求策略,降低请求失败率至5%以下,系统稳定性提升60%。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接