深耕大数据行业多年,熟悉大数据开发的多个环节。设计和主导过大数据任务调度引擎,基于 Flink 的拓展项目包括 ChunJun、Flink StreamSQL 等。

深耕大数据行业多年,熟悉大数据开发的多个环节。设计和主导过大数据任务调度引擎,基于 Flink 的拓展项目包括 ChunJun、Flink StreamSQL 等。
袋鼠云的数据开发平台对外提供一站式的数据开发服务,需要对多个类型外部数据源进行接入。在此背景下,就需要一个高效、稳定的数据集成工具保障后续的数据开发任务能顺利进行。在对比多个工具之后,我们选择了 Flink 作为基座自研了 ChunJun(原 Flinkx)数据集成框架。经过 4 年多的迭代,ChunJun 已经成为一个稳定、高效、易用的批流一体数据集成工具,可实现多种异构数据源高效的数据同步。本次演讲我将介绍 ChunJun 在数据集成上的重要功能,并分享其实现原理。
演讲提纲:
你将获得:



微信咨询

电话咨询
微信联系我们
