B 站万亿规模下管道化传输的演进

所属专题:融合趋势下的大数据技术

嘉宾 : 郑志升 | bilibili大数据实时平台负责人

会议室 : 水晶厅

讲师介绍

专题演讲嘉宾:郑志升

bilibili大数据实时平台负责人

郑志升,bilibili 大数据实时体系负责人,加入 B 站前曾任职于阿里巴巴。主导涵盖“数据埋点-实时传输接入-实时计算-开发应用”全链路的中台建设,目前重点关注实时(含增量)的传输与计算,实时机器学习等方向。
 

议题介绍

演讲:B 站万亿规模下管道化传输的演进

伴随着 B 站多元化的高速发展,企业内部对数据的需求也变得越发强烈,数据集成作为大数据领域的建设基石,一方面要能覆盖采集复杂繁多的数据源,另一方面还要做到在万亿规模的数据体量下保障数据传输质量。本次演讲主要分享 B 站从数据的上报,边缘采集,实时传输,到流式分发的全链路一体化架构演进。核心内容要点包括边缘传输的架构实现,基于 Flink 流批一体的实时分发架构,以及超大规模下的稳定性保障方案与建设。

内容大纲:

  1. 传输体系面临的挑战
  2. 边缘化传输架构的落地
  3. 基于 Flink 实时分发架构的挑战
  4. 全链路数据高压下的稳定性保障建设

听众收益:

  • 了解大数据的整条传输分发链路
  • 了解数据的采集体系是如何在复杂需求的机制下构建的
  • 了解 Flink 流批一体的架构如何解决数据集成领域的各种问题
  • 了解数据在万亿规模下如何打造高性能和高可用的综合型管道化服务

交通指南

上海虹口三至喜来登酒店

Beijing International Convention Center
地址:上海市四平路59号
  • 微信咨询

  • 电话咨询

    联系电话:86+ 17310043226

微信联系我们