专题演讲嘉宾:郑生俊

有赞数据基础平台负责人

郑生俊,有赞数据基础平台负责人。他在有赞主要负责离线计算、实时计算、在线存储和OLAP查询等基础服务工作。目前致力于优化大数据成本,建设低成本高效率的数据底层服务。

by 郑生俊

有赞
数据基础平台负责人

随着近几年业务快速发展与迭代,大数据的成本也水涨船高,如何优化成本,建设低成本高效率的底层服务成为了有赞数据基础平台2020年的主旋律。本次分享主要介绍了随着云原生时代的到来,经历7年发展的有赞离线计算平台如何拥抱云原生,通过容器化改造、弹性伸缩、大数据组件的错峰混部,做到业务成倍增长的情况下成本负增长。  

演讲大纲

1. 有赞离线计算的发展历程

  • 有赞离线计算7年发展史
  • 当前规模下的挑战

2. 存储计算分离

  • 存储计算分离的实践
  • 有赞存储治理的经验

3. 离线计算容器化改造

  • Spark on K8s 容器化改造

4. 容器化改造后的大幅度降本

  • 基于云主机的离线计算弹性伸缩
  • 在线服务与离线计算的错峰混部

5. 未来规划

你将获得
1. 了解有赞离线计算的发展历程
2. 了解存储计算分离的实践以及有赞关于存储治理的经验
3. 了解 Spark on K8s 容器化改造

适合人群

大数据从业人员,适合对大数据基础设施、云原生感兴趣的同学。

交通指南

杭州·JW万豪酒店

Renaissance Beijing Capital Hotel
地址: 杭州拱墅区湖墅南路28号
  • 微信咨询

  • 电话咨询

    联系电话:86+ 13167596032

微信联系我们