IT人力外包人才简历库

返回列表

数据采集工程师

驻场外包人员
工作年限:1年 意向城市:杭州 浏览:3次 发布时间:近期

技能标签

Python Scrapy Requests Selenium MySQL Redis MongoDB Django HTML CSS JavaScript 数据采集 反爬策略 接口开发 数据清洗 网络爬虫

专业技能

精通Python爬虫技术,熟练运用Requests、Selenium、Scrapy框架进行网络数据采集与处理。具备MySQL数据库设计与优化能力,熟悉Redis缓存机制与MongoDB非结构化数据存储。掌握Django后端开发框架,能够进行API接口开发与数据处理。熟悉HTML/CSS/JavaScript前端技术,具备网页结构解析与动态内容抓取能力。

工作履历(脱敏处理)

专注于网络数据采集系统开发,主导完成京东商品信息抓取系统,通过Scrapy框架实现日均百万级数据采集,采用分布式爬虫架构提升采集效率。开发医院招投标信息采集平台,设计反爬策略应对动态验证码,实现招标数据自动抓取与分类存储。搭建豆瓣电影数据采集系统,运用Selenium处理JavaScript渲染内容,完成电影信息结构化存储。具备数据清洗与API接口开发能力,能够独立完成数据采集系统从需求分析到部署上线的全流程开发。

项目经验(脱敏处理)

1. 京东商品信息采集系统:基于Scrapy框架开发分布式爬虫,采用代理IP池应对反爬策略,实现日均百万级商品数据采集,通过MySQL分库分表优化存储性能。

2. 医院招投标数据平台:设计动态验证码识别方案,利用Selenium处理JavaScript渲染内容,构建MongoDB数据存储架构,实现招投标信息自动抓取与分类管理。

3. 豆瓣电影数据采集:开发基于Requests的爬虫系统,处理动态加载内容,完成电影信息结构化存储,通过Redis缓存提升数据采集效率。

4. 网页特效开发平台:使用HTML/CSS/JavaScript实现前端交互功能,开发网页动态效果模块,支持用户内容发布与评论互动功能。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接