AMAZING RESUME
188****6634niu****@***.com北京30男ETL实施工程师在职北京15k-25k •主修课程聚焦数据工程方向，包括《数据仓库与OLAP》、《分布式数据处理》与《数据库内核实现》，毕业设计《基于Flink的异常数据实时检测与清洗引擎》获院级优秀，锻炼了流式处理与状态管理能力。
•在校期间加入数据科学俱乐部，参与搭建跨校区的学生行为分析数据管道，使用Kettle将校园卡、门禁与图书馆系统数据抽取至ClickHouse，并设计物化视图加速报表查询。
•参加全国大学生数学建模竞赛，负责数据预处理与特征工程部分，通过清洗缺失值与异常点构建预测模型，最终获得省级二等奖，强化了在有限时间内排错与交付的能力。
•承担集团零售板块数据中台的ETL建设，采用Kettle作为主工具，完成订单、库存、用户行为等核心主题的数据抽取与清洗。
•与运营、商品团队协同梳理指标口径，设计维度建模方案，将分散在ERP、POS、CRM等系统中的数据整合为统一的分析层。
•针对部分作业执行缓慢的问题，通过调整分区策略、并行抽取和增量加载，将每日批处理窗口从3.5小时压缩至1小时20分钟。
•输出《ETL开发规范》《数据映射文档》及作业调度DAG图，建立代码评审机制，帮助组内同事快速上手增量维护。
高级ETL实施工程师数据治理DataX技术交付
北京
•主导某大型制造企业数据治理平台的ETL模块交付，带领4人小组，对接MES、SCADA、ERP等十余个异构数据源，实现全链路数据集成。
•制定团队开发规范，引入DataX进行多源异构数据交换，并搭建统一调度平台，显著降低脚本维护成本。
•作为技术接口人，直接与客户方IT总监沟通需求，提供数据清洗、脱敏及异常补偿方案，确保项目二期比原计划提前两周上线。
•组织内部技术分享，培训组员掌握DataX、Flink CDC等新工具，并指导他们独立承担子模块交付，提升团队整体战斗力。
某股份制银行数据仓库升级项目 - ETL开发工程师
2017.03-2018.06
•参与该银行数据仓库从Oracle到分布式MPP架构的迁移，负责存款、贷款主题的ETL逻辑重构。
•从核心交易系统、信贷系统、网银日志中捕获增量数据，通过Python脚本进行数据质量校验与异常标记，再加载至新仓库。
•针对对公贷款业务存在的大量嵌套结构，设计自定义转换组件，将复杂的JSON半结构化数据解析为关系型宽表，并实现数据回补机制。
•优化作业链依赖，将原来串行批处理改为阶段性并行，关键报表的T+1数据产出时间提前至凌晨3点，赢得业务部门高度认可。
某连锁餐饮集团数据集成与BI项目 - ETL实施工程师
2019.09-2020.03
•负责该餐饮集团数据平台的整体ETL实施，整合美团、饿了么、自营小程序、POS机及供应链系统等多源数据。
•设计数据分层架构，采用DataX进行离线同步，通过Flink CDC实现门店订单的实时捕获，并开发统一清洗规则库，保证食材消耗与财务对账口径一致。
•搭建自动化的ETL监控看板，对作业失败、数据延迟、重复记录等异常进行企业微信告警，并建立重跑和补偿流程，使数据异常响应时间从小时级降至分钟级。
•交付完整的数据同步调度方案，支持每日凌晨全量同步和白天每10分钟增量刷新，满足营运部门实时查看门店销售排行的需求。
对数据如何流动、整合与交付始终抱有浓厚兴趣，享受从杂乱源端梳理出可靠管道的过程。习惯以严谨审慎的态度对待每一条数据规则，对质量异常高度敏感，善于在压力下快速定位链路问题并闭环。熟悉主流ETL工具与数仓分层架构，能独立完成从接口设计到调度部署的端到端落地。乐于在技术与业务间搭建桥梁，用清晰表达降低协作损耗，期待在数据集成岗位上持续深耕，把数据底座做实做稳。
数据工程实践:
为开源项目Apache SeaTunnel贡献了多个数据源连接器，包括自研的校园一卡通系统HTTP接口插件，并修复了单表同步时分区字段丢失的bug，被社区采纳。
在个人技术博客上发表《ETL任务调度避坑指南》系列，涵盖Azkaban与DolphinScheduler的实战对比，累计阅读量破万，并收到多家企业内推邀请。
利用Docker搭建MinIO+Hive+Spark的本地沙箱环境，复现生产环境中数据倾斜、小文件过多等问题，并整理出一套ETL作业调优checklist，用于新员工培训。
