专题演讲嘉宾:王刚

汽车之家智能数据中心 数据工程师

毕业于沈阳航空航天大学计算机科学与技术专业。2018年加入汽车之家,重新设计并开发了日志采集平台,从 0 到 1 设计开发了基于 Apache Flink 的实时计算平台、实时接入平台;2020 年开始探索并落地湖仓一体架构,主导 Apache Iceberg 的集成和优化工作;喜欢技术探索,注重用户思维,擅长定位及解决工作中遇到的各种疑难杂症。

by 王刚

汽车之家
智能数据中心 数据工程师

本次分享我将为大家着重介绍 Apache Flink 在汽车之家的核心实践内容,你可以了解到:如何基于 Apache Flink 建设稳定、易用、日计算量超过万亿级的实时计算平台;如何复用实时计算平台强大的分布式计算能力和完善的基础设施,快速建设数据接入平台;如何基于 Apache Flink + Apache Iceberg 建设湖仓一体的架构以及在实践落地的过程中做了哪些优化,踩过哪些坑。

演讲提纲:

1. 实时计算平台建设

  • 背景
  • 自助开发
  • 自助运维
  • 自动伸缩容
  • 复用实时计算平台

2. 实时数据入湖(Iceberg)

  • 打通数仓现有权限体系
  • Iceberg Upsert 功能改进
  • 其他实践
  • 遇到的一些问题

你将获得:

  • 了解 Iceberg 入湖的生产经验
  • 了解汽车之家实时计算平台建设经验

交通指南

来广营·朝来科技园

Laiguangying Beijing
地址: 北京市朝阳区来广营朝来科技园
  • 微信咨询

  • 电话咨询

    联系电话:+86 13167596032

微信联系我们