AMAZING RESUME · SOFT RADIUS
牛敬业
数据仓库开发专家
188****6714niu****@***.com北京30男数据仓库开发专家在职北京30k-40k •- 完成《大数据平台构建实战》课程项目,基于Hadoop生态搭建PB级数据湖,实现多源异构数据接入与统一元数据管理
•- 获中国计算机设计大赛一等奖,设计智能物流路径优化系统,采用图算法动态调整运输方案降低30%时效成本
•- 主导省科技厅重点项目子课题,开发实时数据校验框架,将ETL链路错误定位效率提升40%,相关成果获软件著作权2项
•- 主导搭建物流行业全链路数据仓库,设计分层建模体系支撑日均2000万单履约监控,通过列式存储压缩使Hive查询响应速度提升65%
•- 开发流批一体ETL引擎,整合Kafka+Spark Streaming处理多源异构数据,实现库存状态秒级更新并降低数据延迟至8秒以内
•- 建立数据服务化中间层,封装120+个标准化数据接口供业务系统调用,使跨部门数据获取效率提升3倍
•- 设计冷热数据分离策略,结合HBase与HDFS实现历史数据自动归档,年度存储成本削减40万元
北京智慧能源科技有限公司 - 大数据研究院清洁能源
2020.01-2022.10
•- 重构新能源企业数据底座,采用Hadoop生态实现多源数据统一治理,存储规模突破300TB并支撑50+业务系统并发访问
•- 主导分布式数仓迁移项目,通过双写校验机制完成280TB历史数据无损迁移,保障业务系统连续180天稳定运行
•- 构建数据质量监控体系,开发自动化校验规则覆盖12类异常场景,使数据准确率达99.8%并建立问题追溯机制
•- 设计跨组织数据交换平台,对接7家合作方实现实时数据同步,将数据交付时效从T+1提升至T+0
•- 针对电力市场高频交易特性,设计时序数据+关系型混合存储模型,单日处理1.2亿条交易记录
•- 开发实时价格波动预警模块,通过Flink CEP规则引擎实现异常交易毫秒级拦截
•- 构建多维度分析引擎,支持按区域/时段/供应商等6个维度进行交叉分析,响应速度达秒级
•- 项目上线后支撑电网调度决策,使现货市场撮合效率提升27%,误差率控制在0.3%以内
•- 设计湖仓一体架构,整合AWS S3与Delta Lake实现结构化与非结构化数据统一管理
•- 开发智能路由算法模块,基于历史数据训练预测模型,使跨境包裹中转时效提升22%
•- 构建端到端数据血缘系统,自动追踪120+数据表间的依赖关系,故障定位时间缩短80%
•- 建立数据资产目录,沉淀300+个数据产品并配套质量评估体系,获评公司年度标杆项目
始终以数据架构的精密性为职业信仰,坚信结构化数据是业务决策的基石。具备从0到1搭建PB级数据底座的能力,擅长在复杂业务场景中平衡存储成本与查询效率。日常习惯通过数据血缘追踪定位问题根源,对元数据治理有近乎偏执的严谨态度。持续深耕实时数仓领域,近期完成3次跨域数据融合方案设计。求职意向:聚焦高并发场景下的数据服务化落地,期待与团队共建行业级数据资产体系。
OLAP数据库优化(ClickHouse/Doris)
数据可视化与运维实践:
基于Grafana+Prometheus搭建数据库性能监控体系,配置多维指标看板与智能告警机制,成功预警3起潜在宕机风险并推动完成存储层自动扩容方案落地