Flink + TiDB: 当流批一体的计算框架遇到 HTAP 的数据库

所属专题:新一代互联网应用下大数据平台

嘉宾 : 顾亮亮 | PingCAP 研发工程师

讲师介绍

专题演讲嘉宾:顾亮亮

PingCAP 研发工程师

顾亮亮,PingCAP 研发工程师,现在实时计算团队,负责大数据生态相关工作。2014年加入爱奇艺从零开始搭建了实时计算平台,期间对 Spark、Flink 做了深入的研究。2019年加入 PingCAP 负责 TiDB 对接 Spark (TiSpark)、Flink 等大数据生态的工作。

议题介绍

演讲:Flink + TiDB: 当流批一体的计算框架遇到 HTAP 的数据库

Flink 是一款流批一体的计算框架,在实际应用中由于缺少一款流批一体的存储引擎,导致实际架构会比较复杂。TiDB 是一款开源的、分布式、同时能支持 OLAP 和 OLTP 负载的 NewSQL 数据库,TiDB 能做到水平扩展、强一致性和高可用。利用 TiDB 的水平扩展能力和强大的 HTAP 能力配合 Flink 的流式计算能力,可以搭建出可以水平扩展的、高效、易用的实时数据仓库。此外还会介绍一下业界真实使用 TiDB + Flink 来构建实时数据仓库的案例。

演讲大纲

1、TiDB 如何做到 HTAP

  • TiKV: OLTP
  • TiFlash: OLTP

2、业界使用 Flink 做实时数仓的案例及遇到的问题

  •   Flink + MySQL
  •   Flink + Clickhouse

3、Flink + TiDB 做实时数仓

  • 方案
  • 优势
  • 行业案例

4、未来方向

听众收益

  • 了解 TiDB 的架构
  • 了解如何使用 Flink + TiDB 构建实时数仓
  • 了解其他公司真实案例

适合人群

对TiDB、Flink、实时计算感兴趣的技术人员,架构师与产品经理等。

交通指南

杭州·JW万豪酒店

Renaissance Beijing Capital Hotel
地址: 杭州拱墅区湖墅南路28号
  • 微信咨询

  • 电话咨询

    联系电话:86+ 13167596032

微信联系我们