点击保存简历
模块
风格
模板
导入
  • 个人名称
  • 头像
  • 基本信息
  • 求职意向
  • 工作经历
  • 项目经验
  • 实习经验
  • 作品展示
  • 奖项荣誉
  • 校园经历
  • 教育背景
  • 兴趣爱好
  • 技能特长
  • 语言能力
  • 自我评价
  • 报考信息
  • 简历封面
  • 自荐信
个人简历 RESUME
陆明哲
用系统化的思维解决问题,用温度化的方式交付成果,这是我的工作准则。
28岁
3年工作经验
13800138000
DB@zjengine.com
陆明哲的照片
求职意向
实时计算开发工程师
杭州
薪资面谈
到岗时间另议
工作经历
2021.12 - 2023.07
小楷智能数据科技公司
流批一体架构师
  • 主导公司“流批一体数据融合”战略的落地,基于Apache Flink和Apache Hudi构建了统一的数据处理架构。通过一套代码(Flink DataStream API)同时处理实时流和离线批量历史数据,并将结果写入Hudi表,彻底消除了实时与离线数据之间的口径不一致问题,数据一致性达到100%。
  • 创新的“增量物化视图”方案,基于Flink的持续查询能力,将传统需要定期全量计算的数据模型转变为“实时增量更新”模式,将核心业务数据的产出延迟从小时级降至秒级,同时计算资源消耗降低50%。
  • 该方案成功帮助某大型制造企业客户实现了对其全产业链数据的实时监控与决策,客户库存周转率因此提升15%,该项目成为公司年度标杆案例,带来合同金额超两千万元。
  • 在公司内向业务部门大力推广Flink CDC技术,替代了传统的基于查询的数据库同步方案,实现了数据库增量变化的低延迟、全量同步,将数据实时入湖入仓的效率提升了一个数量级。
2020.03 - 2021.11
小楷智能数据科技公司
ETL开发工程师
  • 负责传统的离线数据仓库开发,使用 Hive 和 Spark 处理每日 TB级 的业务数据,对数据建模和离线ETL有深入理解。
  • 主导设计云原生实时数据平台​​,基于​​Flink on Kubernetes​​构建,实现了计算资源的秒级弹性伸缩,成功应对了业务流量高达​​10倍​​的瞬时波峰,年度计算成本优化​​25%​​。
  • 深度优化​​Flink State​​的存取效率,针对超大规模状态(​​TB级​​)作业,创新性地采用​​SSD+内存​​的混合存储模式,并将checkpoint时间稳定在​​90秒​​ 以内,平台稳定性大幅提升。
  • 构建了​​实时数据血缘与治理体系​​,实现了从Kafka Topic到Flink作业再到下游应用的端到端血缘追踪,数据故障定位平均时间从小时级缩短至​​5分钟​​。
项目经验
2022.03 - 2023.08
星途互动科技有限公司
大数据开发负责人

星途社区用户行为实时分析平台研发

  • 项目背景:星途社区作为千万级UGC内容平台,原有离线用户行为分析系统存在T+1延迟,无法支撑运营团队对用户互动、转化的实时洞察;核心目标是搭建秒级延迟的全链路用户行为实时分析平台,覆盖注册、浏览、互动到转化的全生命周期追踪与多维度聚合。
  • 解决的关键难题:一是高并发下实时数据链路吞吐瓶颈(原Kafka集群峰值仅10万条/秒);二是多维度(用户属性、场景、行为类型)实时聚合性能不足(原Spark Streaming延迟超3分钟);三是跨组件的exactly-once数据一致性保障(易出现重复或丢失)。
  • 核心行动与创新:主导设计“三层实时数据架构”(原始事件层Kafka→明细清洗层Flink→聚合存储层ClickHouse),按“用户ID+行为类型+时间戳”分区提升查询效率;用Flink RocksDB状态后端预计算常用维度(小时级活跃、场景转化率),将聚合延迟降至10秒内;基于Flink Checkpoint+Redis幂等表实现数据幂等,重复率降至0.01%以下。
  • 成果与价值:平台上线后吞吐量提升至100万条/秒,支撑大促期间运营实时调整策略(如用户3分钟未互动推送福利),转化率提升25%;日均处理80亿+事件,覆盖90%实时业务场景;个人攻克高并发与一致性难题,奠定公司实时数仓技术基础。
2020.06 - 2022.02
星途互动科技有限公司
大数据开发工程师

电商直播观众留存实时预测与干预系统

  • 项目背景:电商直播业务30日留存仅40%,原有离线留存模型(T+1更新)无法实时识别高流失观众并干预;目标是搭建实时预测与干预系统,实现行为实时特征计算、留存概率预测及精准触达。
  • 解决的关键难题:一是实时特征时效性不足(原批处理需小时级更新);二是在线推理延迟高(XGBoost模型超500ms,无法支撑1秒内响应);三是线上线下特征不一致导致模型效果下降。
  • 核心行动与创新:设计“实时特征pipeline”,用Flink计算“过去5分钟互动次数”“当前会话停留时长”等特征,存入Redis供模型调用,更新延迟降至2秒内;将模型替换为LightGBM(推理速度提升3倍),通过TensorFlow Serving部署,在线响应控制在200ms内;建立特征一致性机制,离线复用实时schema,模型准确率稳定在85%以上。
  • 成果与价值:留存预测准确率从70%升至85%,高流失观众干预率从10%提至50%;观众平均留存时间延长30分钟,单场GMV增长20%;个人打通实时特征到业务干预闭环,支撑直播“千人千面”策略,成为业务核心增长工具。
技能特长
沟通能力
执行能力
热情坦诚
文案能力
兴趣爱好
摄影
看书
阅读
跑步
智能诊断
编写灵感
请选择需要查找的灵感类型
请选择灵感源泉
选择合适的内容插入后即可编辑调整
请在上方选择您需要获取的灵感类型
对话框
提示
说明