技能标签
专业技能
精通Python编程语言,擅长网络数据采集技术,掌握Requests、BeautifulSoup、XPath、正则表达式等数据解析工具。熟悉多线程并发处理(threading模块)与异步编程(asyncio、aiohttp、aiofiles),具备动态网页数据抓取能力。熟悉微信小程序开发,掌握WXML/WXSS前端开发及后端接口对接技术。具备数据清洗、格式化输出及自动化处理能力,熟悉CSV/JSON数据结构处理。
工作履历(脱敏处理)
主导网络数据采集系统开发,设计多线程并发架构实现百万级数据抓取,采用异步IO优化爬取效率,解决动态网页渲染难题。开发视频处理自动化流程,实现TS文件批量下载、解密、合并及清理,提升视频处理效率300%。参与微信小程序开发,完成代领快递、在线抢单等核心功能模块,实现前后端数据交互与业务逻辑对接。构建数据解析框架,支持XPath/正则表达式多模式解析,输出标准化CSV/JSON数据格式。
项目经验(脱敏处理)
1. 网络数据采集系统:设计分布式爬虫架构,采用Requests+BeautifulSoup实现静态/动态网页数据抓取,通过异步IO优化并发性能,解决反爬机制问题,日均采集数据量达50万条。2. 视频处理平台:开发TS视频文件批量下载工具,集成FFmpeg实现视频解密与合并,设计自动化清理机制,实现视频处理全流程自动化。3. 微信小程序开发:主导校园速递项目,完成代领快递、在线抢单等核心功能,实现前后端数据交互,支持多端数据同步,提升用户操作效率40%。4. 数据解析系统:构建多模式解析框架,支持XPath、正则表达式等解析方式,实现数据清洗与格式化输出,输出标准化CSV/JSON数据文件。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
1年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接