牛敬业
常怀探索之心,以实干沉淀自身价值
188****0768niu****@***.com北京30男数据仓库云平台工程师在职北京20k-30k •重点选修《分布式系统与一致性》、《云原生应用设计》等高阶课程,利用Kubernetes与Ceph搭建私有化对象存储集群,深入理解存算分离架构与IO路径优化。
•作为队长参加全国大学生数据建模挑战赛,基于Flink SQL构建实时数据仓库宽表,完成多维度指标计算与异常检测,获华北赛区特等奖。
•主导校园一卡通日志分析项目,设计ETL流水线对接Kafka与ClickHouse,实现查询加速与数据回溯,保障了日均百万级数据的稳定接入。
北京某数字科技有限公司 - 数据智能部高新技术企业数据科技
2018.07-2021.12
数据仓库云平台工程师数据仓库建模云平台运维业务分析
北京
•主导公司零售场景数据仓库云平台的架构规划,针对多业态、多源数据特点,设计星型与雪花混合数据模型,使核心查询性能提升35%,支撑了供应链和销售决策。
•负责平台全生命周期运维,建立自动化监控、告警与备份恢复体系,实现全年服务可用性达99.99%,主动发现并解决潜在瓶颈,杜绝重大停机事故。
•与财务、运营、市场等部门深度协作,将业务痛点转化为数据解决方案,交付了销售预测、库存优化等数据产品,获业务方高度认可,驱动数据文化渗透。
北京某互联网平台 - 数据平台部互联网平台技术驱动
2022.01-至今
数据仓库云平台工程师实时数据集成数据质量监控云原生技术
北京
•参与新一代数据仓库云平台的升级改造,重点攻克实时数据集成模块,基于Flink构建流批一体管道,将数据延迟从分钟级降至秒级,提升业务实时响应能力。
•构建数据质量监控与治理体系,引入数据血缘追踪和动态规则引擎,实现质量问题的自动化发现与告警,数据异常检出率提升60%,显著降低脏数据影响。
•推动云原生技术落地,将Spark离线作业进行容器化改造并接入Kubernetes调度,资源利用率提升40%,同时降低运维复杂度,为团队引入更灵活的技术选型。
•项目背景:企业零售业务线数据分散于各垂直系统,亟需统一云化数据平台,实现实时分析与业务洞察。
•项目职责:作为数据架构师,负责数据仓库分层设计(ODS/DWD/DWS),制定建模规范,并主导核心集市模型开发。
•项目成果:平台上线后,报表生成时间从小时级压缩至分钟级,数据驱动决策效率提升50%,成功支撑了精准营销、品类优化等场景,成为业务增长引擎。
•项目背景:为满足个人信息保护等法规要求,对数据仓库云平台实施全面的安全加固与合规治理。
•项目职责:负责制定数据分级分类标准,设计并实施列级加密、动态脱敏策略,构建全链路审计日志与风险预警。
•项目成果:建立了细粒度数据安全防护体系,顺利通过信息安全等级保护测评,实现数据访问零泄露,获得合规与法务部门的高度认可。
对稳定、高效的数据架构有天然执着,享受从混乱中梳理出清晰的数据脉络。做事严谨,习惯为每一条数据链路预设容错与监控,把平台可靠性放在首位。擅长云原生数据仓库的搭建与调优,对成本控制和性能优化保持持续钻研。既能在团队中推动治理规范,也乐于把复杂技术翻译成业务听得懂的语言,期待在数据基础设施领域持续深耕。
数据工程与优化实践:
深入理解数据仓库分层建模与维度退化,熟练使用Airflow及dbt编排复杂ETL任务,通过重构雪花模型与引入聚合表,将核心报表产出时间缩短60%。