技能标签
专业技能
精通Python编程语言,熟练掌握Scrapy框架进行网络爬虫开发,熟悉MySQL与MongoDB数据库设计与优化,具备Selenium自动化测试能力。掌握数据采集流程设计与反爬策略实施,熟悉数据清洗与存储方案。正在系统学习Vue.js前端框架,具备基础的前端开发能力。
工作履历(脱敏处理)
作为数据采集专员,主导多个数据采集项目开发,包括房源信息、游戏数据、彩票信息等。设计并实现反爬策略,采用Scrapy框架进行高效数据采集,结合Selenium处理动态网页内容。完成MySQL与MongoDB数据库架构设计,实现数据分类存储与查询优化。通过数据清洗流程提升数据质量,支持后续分析应用。持续学习Vue.js前端框架,提升全栈开发能力。
项目经验(脱敏处理)
1. 房源数据采集系统:基于Scrapy框架开发房源数据采集程序,采用Selenium处理动态加载内容,设计MySQL与MongoDB混合存储方案,实现数据分类存储与高效查询。
2. 英雄联盟数据采集:开发LOL官网英雄数据采集程序,通过反爬策略处理验证码识别,使用MySQL存储结构化数据,MongoDB存储非结构化数据,实现英雄强度分析。
3. 双色球数据采集:构建彩票数据采集系统,采用Scrapy+MongoDB实现双色球历史数据存储,设计数据清洗流程提升数据可用性。
4. 社交媒体数据采集:开发微博明星账号数据采集程序,结合Selenium处理动态加载内容,设计MySQL存储结构化数据,实现数据可视化分析。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
1年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接