现任职中国移动云能力中心,高级系统架构师,中国移动十百千专家。长期负责大数据平台架构设计和数据库设计工作,擅长超大规模Hadoop集群调优和数据库优化工作。开源技术爱好者,立志于开源技术的推广和实践落地。

现任职中国移动云能力中心,高级系统架构师,中国移动十百千专家。长期负责大数据平台架构设计和数据库设计工作,擅长超大规模Hadoop集群调优和数据库优化工作。开源技术爱好者,立志于开源技术的推广和实践落地。
针对业务日志信息的统计是一种常见的需求场景,实现方法也多种多样。中国移动在数据千亿条的场景下,先尝试了 ETL+MySQL,可处理的数据量又无法满足需求,又尝试了 ETL+Hive,但计算性能较差。我们希望在满足容量需求的情况下,能达到较好的性能,对整体架构进行了优化。本次分享将给大家带来使用 ClickHouse 实现千亿条日志数据统计的架构落地及优化,以及 ClickHouse 在这个过程中有哪些优势又有哪些问题。
演讲提纲:
你将获得:



微信咨询

电话咨询
微信联系我们
