专题演讲嘉宾:王玉

唯品会OLAP资深工程师

唯品会OLAP和数据服务团队负责人,曾于大众点评、平安好医生负责大数据底层和平台相关工作,负责Presto、ClickHouse、Kudu、数据服务等相关工作。

by 王玉

唯品会
OLAP资深工程师

随着 ClickHouse 越来越火热,很多公司都迫切地想体验一下这匹来自战斗民族的黑马,但体验这匹黑马,首先需要解决原有 Hive 数据仓库的数据和 ClickHouse 的互通问题。

本次分享主要带来唯品会如何选型组件 Sea Tunnel (原 Waterdrop) 完成 ClickHouse 和 Hive 的数据出仓入仓,内容包括过程中唯品会遇到了哪些痛点,是怎么解决的,在原有的功能上做了哪些优化等等,希望能和大家互相学习,交流经验。

演讲提纲:

  1. ClickHouse 数据导入的需求和痛点
  2. ClickHouse 和 Hive 出仓入仓工具的选型
  3. Hive 出仓 ClickHouse
    • 使用 Sea Tunnel 中 HyperLogLog 加速
    • Bitmap 出仓入仓的实现
  4. ClickHouse 数据入仓 Hive (含 Bitmap 数据类型)
  5. Sea Tunnel 在唯品会数仓中扮演的角色
    • 平台的集成与扩展

听众受益:

  • 完整了解 ClickHouse 和其他数据组件的数据导出导入
  • 规避初次接触 ClickHouse 数据出入仓时可能碰到的问题和痛点

交通指南

来广营·朝来科技园

Laiguangying Beijing
地址: 北京市朝阳区来广营朝来科技园
  • 微信咨询

  • 电话咨询

    联系电话:+86 13167596032

微信联系我们