IT人力外包人才简历库

返回列表

Java开发工程师(含Python爬虫)

驻场外包人员
工作年限:5年 意向城市:杭州 浏览:3次 发布时间:近期

技能标签

Java开发 SpringBoot Python爬虫 Scrapy Selenium 反反爬策略 数据清洗 ETL Redis MySQL Linux 分布式架构 网络协议 系统部署

专业技能

精通Java语言及SpringBoot框架,熟悉分布式系统设计。掌握Python编程语言,擅长Scrapy、Selenium等爬虫框架开发,具备反反爬策略设计能力。熟悉Redis、MySQL等数据库技术,熟练使用Linux系统进行服务部署。具备数据清洗、ETL工具链应用经验,熟悉网络协议及分布式爬虫架构优化。

工作履历(脱敏处理)

曾主导某电商平台数据中台建设,采用SpringBoot+MyBatis架构实现业务系统重构,通过分布式事务方案解决跨系统数据一致性问题。主导开发校园资讯采集系统,设计分布式爬虫框架实现日均百万级数据采集,采用Selenium+Scrapy实现复杂反爬机制突破。优化数据处理流程,通过ETL工具链实现数据清洗效率提升60%,支撑企业市场分析决策系统建设。

项目经验(脱敏处理)

校园新闻资讯采集系统:设计分布式爬虫架构,采用Scrapy-Redis实现任务分发与结果聚合。针对目标网站反爬机制,通过IP代理池、请求头伪装、验证码识别等策略实现稳定采集。开发数据清洗模块,利用Pandas进行数据去重与格式标准化,最终实现日均10万条新闻数据采集,准确率达99.2%。系统采用Docker容器化部署,支持横向扩展,满足高峰期数据采集需求。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

5年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接