技能标签
Python
Java
Hive
Spark
Kafka
ClickHouse
SQL优化
Shell脚本
数据可视化
分布式架构
数据治理
专业技能
精通Python/Java编程语言,擅长Hive/Spark大数据处理框架,熟悉Kafka实时数据传输体系,掌握ClickHouse时序数据库及数据可视化工具(Tableau/Power BI)。具备SQL优化及Shell脚本开发能力,熟悉分布式系统架构设计与数据治理规范。
工作履历(脱敏处理)
曾主导某大型电商平台数据中台建设,设计日均处理PB级数据的分布式计算架构。优化Hive查询性能30%以上,实现Kafka实时数据管道的高可用部署。主导ClickHouse时序数据库的搭建与调优,支撑百万级并发查询场景。具备完整的数据生命周期管理经验,包括数据采集、清洗、存储、分析及可视化展示全流程开发。
项目经验(脱敏处理)
主导某金融行业风控系统建设,采用Spark Streaming实现实时数据处理,通过Kafka消息队列构建高吞吐量数据传输通道。设计基于Hive的多维数据仓库架构,优化ETL流程使数据处理效率提升40%。开发数据可视化看板,集成Tableau实现业务指标动态监控。解决分布式计算中的数据倾斜问题,通过动态分区策略和资源调度优化,使集群资源利用率提升25%。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
5年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接