IT人力外包人才简历库

返回列表

Python爬虫开发工程师

驻场外包人员
工作年限:1年 意向城市:杭州 浏览:3次 发布时间:近期

技能标签

Python开发 网络爬虫 数据解析 多线程编程 异步IO 微信小程序 数据清洗 自动化脚本 动态网页抓取 接口对接 数据格式化 文件处理 并发编程 网络协议 正则表达式

专业技能

精通Python编程语言,擅长网络数据采集技术,掌握Requests、BeautifulSoup、XPath、正则表达式等数据解析工具。熟悉多线程并发处理(threading模块)与异步编程(asyncio、aiohttp、aiofiles),具备动态网页数据抓取能力。熟悉微信小程序开发,掌握WXML/WXSS前端开发及后端接口对接技术。具备数据清洗、格式化输出及自动化处理能力,熟悉CSV/JSON数据结构处理。

工作履历(脱敏处理)

主导网络数据采集系统开发,设计多线程并发架构实现百万级数据抓取,采用异步IO优化爬取效率,解决动态网页渲染难题。开发视频处理自动化流程,实现TS文件批量下载、解密、合并及清理,提升视频处理效率300%。参与微信小程序开发,完成代领快递、在线抢单等核心功能模块,实现前后端数据交互与业务逻辑对接。构建数据解析框架,支持XPath/正则表达式多模式解析,输出标准化CSV/JSON数据格式。

项目经验(脱敏处理)

1. 网络数据采集系统:设计分布式爬虫架构,采用Requests+BeautifulSoup实现静态/动态网页数据抓取,通过异步IO优化并发性能,解决反爬机制问题,日均采集数据量达50万条。2. 视频处理平台:开发TS视频文件批量下载工具,集成FFmpeg实现视频解密与合并,设计自动化清理机制,实现视频处理全流程自动化。3. 微信小程序开发:主导校园速递项目,完成代领快递、在线抢单等核心功能,实现前后端数据交互,支持多端数据同步,提升用户操作效率40%。4. 数据解析系统:构建多模式解析框架,支持XPath、正则表达式等解析方式,实现数据清洗与格式化输出,输出标准化CSV/JSON数据文件。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接