
AMAZING RESUME · MORNING LIGHT
牛敬业
中级大数据开发工程师
138****1234niu****@***.com北京28男中级大数据开发工程师在职北京25k-35k •在校期间深耕分布式系统与数据库内核方向,参与导师国家级课题,发表过关于大规模数据处理优化方向的学术论文。
•作为核心成员带领团队斩获 ACM-ICPC 区域赛银牌,锻炼了高强度的算法思维与极端压力下的逻辑推演能力。
•主导校园大数据实验室的搭建与维护,负责 Hadoop 集群的运维及环境配置,为多名师弟师妹提供技术环境与指导。
大数据开发工程师实时计算架构流处理优化数据治理
北京
•主导实时计算架构的升级,基于 Flink 重构流处理链路,将核心业务指标延迟从分钟级降至秒级,支撑高并发流量场景。
•搭建统一的数据接入网关,屏蔽底层存储差异,实现多源异构数据(MySQL, Kafka, 日志)的标准化接入与清洗。
•设计并落地数据血缘追踪系统,通过元数据采集实现字段级溯源,显著降低了数据变更对下游报表的影响范围。
•优化集群资源调度策略,通过动态扩缩容与任务隔离机制,在保障 SLA 的前提下降低约 25% 的计算资源成本。
中级大数据开发工程师数据湖建设质量监控体系数仓模型规范
北京
•负责企业级数据湖的规划与实施,引入 Iceberg 技术解决历史数据更新与分区裁剪问题,提升查询性能 40%。
•建立数据质量监控体系,自动化检测空值、重复与逻辑异常,将数据事故发现时间从 T+1 缩短至实时告警。
•推动数仓分层模型规范化,制定 ODS/DWD/DWS/ADS 开发规范,统一了跨部门的数据口径与指标定义。
•赋能业务侧自助取数能力,封装通用 SQL 模板与可视化配置台,减少业务人员提需求等待时间,提升数据使用效率。
•针对高并发交易场景,设计毫秒级风险识别链路,整合用户行为流与设备指纹数据,有效拦截异常交易。
•基于 Flink CEP 构建复杂事件处理规则,实时捕捉欺诈模式,将风险响应时间控制在 100ms 以内。
•引入 Redis 集群作为特征存储,优化热点数据访问路径,支撑日均亿级请求的实时特征查询与计算。
•建立离线与在线特征一致性校验机制,确保模型特征在生产环境中的准确性,提升风控模型召回率 15%。
•主导数据资产盘点与分类分级工作,构建统一的元数据管理平台,实现数据资产的可视化检索与权限管控。
•开发自动化数据质量检核工具,覆盖完整性、唯一性、一致性等多维度规则,自动化拦截脏数据流入数仓。
•推进数据生命周期管理,制定冷热数据分层存储策略,通过生命周期脚本自动归档历史数据,节省存储成本 30%。
•建立数据服务 API 网关,将内部数据资产封装为标准接口,支持多端应用安全、高效地调用数据服务。
对数据流动有执念的工程师,相信代码是逻辑的诗歌,热衷于在混乱的数据中建立秩序。具备扎实的大数据底层技术功底,对分布式系统的稳定性与扩展性有敏锐的直觉,习惯在代码 Review 中追求极致的优雅与健壮。不仅关注技术实现,更在意数据背后的业务价值,能够主动从技术视角为业务增长提供洞察。抗压能力强,享受解决复杂数据难题带来的成就感,期待在更具挑战性的数据平台团队中持续深耕,与团队共同构建高效、可靠的数据基础设施。
技术影响力:
在技术社区(如 InfoQ、CSDN)定期分享大数据踩坑经验与架构设计心得,累计阅读量超 10 万+,热衷于通过技术输出沉淀个人价值。