AMAZING RESUME / 01
NAVIGATE · EXPLORE · ADVANCE
牛敬业
Hadoop平台开发工程师
常怀探索之心，以实干沉淀自身价值
188****1537niu****@***.com北京30岁男Hadoop平台开发工程师在职北京25k-35k •在操作系统课程设计中，利用Java多线程模拟HDFS的NameNode与DataNode通信，实现文件分块、副本复制及心跳检测，体会分布式存储的元数据管理与容错思想。
•作为校ACM集训队主力，多次参加区域赛，在大数据处理类题目中主动设计分治与并行化方案，锻炼了高并发场景下的快速编码与复杂问题拆解能力。
北京某数据科技公司 - 大数据研发部数据科技企业电商零售数据服务
2017.03-2020.08
Hadoop平台开发工程师Hadoop平台运维数据仓库建设实时计算实施
北京
•负责公司大数据平台的日常运维与性能治理，通过节点水位监控、YARN调度策略优化，将集群资源闲置率从25%降至10%，任务平均等待时长缩短35%。
•参与企业数据中台项目，使用Hive构建用户行为数据仓库，处理日均600GB的埋点与交易数据，设计多维宽表为BI团队提供标准化数据服务，支撑精准营销报表体系。
•与数据挖掘团队协作，引入Flink实时处理框架，将用户画像更新延迟从小时级压至分钟级，并建立实时异常检测管道，提升数据应用时效性50%以上。
北京某金融科技公司 - 大数据开发部保险金融科技创新技术驱动
2020.09-至今
Hadoop平台开发工程师平台架构搭建Spark性能调优团队技术赋能
北京
•主导新保险业务线Hadoop平台从0到1建设，独立完成服务器选型、集群规划与高可用部署，支撑日均千万级保单数据的离线处理，实现业务快速上线。
•针对核心ETL链路进行深度优化，通过Spark shuffle参数调优、数据倾斜解决方案及列式存储改造，使批处理作业执行效率提升45%，计算资源成本降低18%。
•负责团队技术能力建设，编写《Hadoop开发规范与疑难手册》，组织内部技术培训与代码评审，帮助3名初级工程师快速融入项目开发。
某连锁零售企业全渠道数据分析平台 - 核心开发工程师
2018.01-2019.12
•该项目为某头部连锁零售企业搭建全渠道数据分析平台，基于Hadoop生态（HDFS、Hive、Spark）构建离线数据底座。
•负责数据接入模块，对接门店POS、线上商城、物流系统等12个异构数据源，采用Flume+Kafka构建实时采集通道，日均处理订单及行为数据量达800GB。
•设计数据仓库分层模型，使用Hive进行ETL清洗与维度建模，构建统一的商品、用户、门店宽表，为营运分析、智能补货等场景提供一致的数据口径。
•通过ORC+Snappy压缩、分区裁剪及分桶索引优化，将存储空间占用降低30%，同时关键报表查询响应时间从秒级优化至亚秒级。
某快递企业物流轨迹实时监控与预警系统 - 开发工程师
2021.01-至今
•参与某快递企业物流轨迹实时监控项目，基于Hadoop和Flink构建混合处理架构，实现全国包裹流转数据的实时采集与计算。
•负责轨迹数据实时接入与状态计算，处理分拨中心扫描、车辆GPS等流式数据，使用Flink CEP实现件延迟、错发等异常事件的秒级预警。
•优化状态更新服务，通过异步IO与旁路缓存模式，将包裹轨迹状态更新延迟从分钟级降低到3秒以内，大幅提升末端派送时效。
•与业务运营团队紧密配合，迭代开发准点率、中转时效等实时看板，直接支撑全国路由调度决策。
对数据工程与分布式计算抱有持续热情，享受从海量数据中提炼价值的工程技术挑战。具备严谨的问题拆解与系统优化思维，习惯以代码整洁与架构可维护性为标准自我要求。对Hadoop生态有深入理解，能体系化地处理集群调优、数据管道搭建与流批一体演进，同时对Flink等实时计算框架保持跟进。乐于在跨职能协作中推动技术落地，务实且重视交付质量，期待在平台开发岗位上持续深耕。
Flink在实时数据平台中的应用预研:
深入研读Flink内核，重点剖析RocksDB状态后端、增量Checkpoint与Exactly-Once语义，对比Hadoop MapReduce的批处理模型，整理出内部技术参考文档。
以实时风控场景为切入点，主导Flink CEP的动态规则POC验证，将结果落盘至HDFS并通过YARN进行资源管理，为公司数据平台从批处理向流批一体架构演进提供关键评估依据。
