IT人力外包人才简历库

返回列表

Python爬虫开发工程师

驻场外包人员
工作年限:1年 意向城市:杭州 浏览:3次 发布时间:近期

技能标签

Python开发 Scrapy框架 数据清洗 Web开发框架 MySQL优化 Linux运维 Shell脚本 分布式爬虫 RESTful API 前端联调 数据库建模 索引优化 数据结构 算法实现 服务器部署 反爬策略 代理池管理

专业技能

精通Python编程语言,掌握面向对象编程范式及核心语法。熟练运用Scrapy、Requests、BeautifulSoup等爬虫框架进行数据采集与清洗,具备分布式爬虫架构设计能力。熟悉Django/Flask全栈开发框架,可独立完成RESTful API开发、数据库建模与部署。精通MySQL数据库优化技术,擅长复杂查询语句编写与索引优化。掌握Linux系统运维技能,具备Shell脚本开发及服务器环境搭建能力。熟悉前端技术栈(HTML/CSS/JavaScript),能实现前后端联调。具备数据结构与算法实现能力,可解决复杂业务场景下的数据处理问题。

工作履历(脱敏处理)

主导开发数据采集与分析系统,基于Scrapy框架构建分布式爬虫架构,通过XPath与正则表达式实现结构化数据提取。设计代理池管理系统,采用多线程技术提升爬取效率,成功规避目标网站的反爬机制。开发个人博客系统,使用Django框架实现用户权限管理、内容发布与评论系统,通过ORM技术优化数据库操作。完成Linux服务器环境搭建,配置Nginx+Gunicorn反向代理架构,确保服务高可用性。持续优化MySQL查询性能,通过索引设计与查询语句重构提升百万级数据处理效率。

项目经验(脱敏处理)

项目一:数据采集平台开发。基于Scrapy框架构建分布式爬虫系统,采用Redis队列实现任务分发与结果存储。设计代理池管理系统,通过IP轮换策略规避目标网站的反爬机制。使用Pandas进行数据清洗与特征提取,结合Matplotlib生成可视化分析报告。项目二:企业博客系统开发。使用Django框架搭建前后端分离架构,实现用户注册登录、文章管理、评论互动等核心功能。通过ORM技术完成MySQL数据库设计,优化查询性能满足百万级数据存储需求。部署Nginx+Gunicorn反向代理架构,配置负载均衡策略确保服务高可用性。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接