6月28日,腾讯云重磅发布了全新升级的全托管数仓产品CDW-ClickHouse,该版本首次填补了原生ClickHouse后续扩容的技术空白,相较Hadoop生态体系有高达10倍乃至100倍的性能提升,支持万亿规模数据毫秒级响应,可为用户提供在海量数据实时分析场景下的极速体验。

现阶段,千行百业都在积极利用大数据能力进行数字化升级,这也对大数据技术提出了更高要求。但目前的技术普遍存在应用难度大、成本高、效率低等挑战,如传统的Hadoop生态体系存在流批分离、架构臃肿、维护难的问题,近年流行的ClickHouse虽然在性能上相较Hadoop有大幅提升,但企业在自建使用ClickHouse的过程中仍存在扩缩容后数据不均衡、运维难度大、稳定性低等痛点。

对此,腾讯云数据仓库负责人马文博表示,“简单易用的云数据仓库受到越来越多客户的青睐,企业会更倾向于用云数据仓库来完成海量数据的实时分析。腾讯云CDW ClickHouse的发布,将为各行各业客户提供超低成本、极致性能的数据分析性能。

以某音乐平台为例,作为国内重点音乐流媒体平台,其承载着每天万亿级新增数据,PB级的数据分析服务。为了应对业务的加速发展,该客户基于CDW ClickHouse搭建了高可用、低延迟的实时分析计算可视化平台,大幅提升了实时数据日接入能力,实时链路平均延时缩短在10秒内,大幅提升了数据分析的时效性,并由此搭建了基础实时数据敏捷分析平台,实现了自助OLAP分析。

据介绍,此前该用户在自建ClickHouse的尝试中遇到了扩容后数据不均衡、重建元数据工作量大等难点问题,采用CDW ClickHouse后,运维人员扩容时可以自动同步元数据到新增节点上,省去了手动创建的操作,并保证了查询性能不受影响。同时,运维人员还可以根据业务按需发起数据重分布,实时控制重分布速度,甚至取消任务。基于这两项核心能力,腾讯云CDW ClickHouse得以帮助该音乐平台全面提升大数据分析的易用性和流程效率。

相较传统的数仓产品,腾讯云CDW ClickHouse还可以有效帮助企业降本增效。以某国民级应用为例,为应对海量业务形态对数据分析提出的挑战,该客户在2020年底曾尝试小规模自建ClickHouse,但遭遇了数据接入慢、稳定性差等挑战,使用CDW ClickHouse后,稳定性和性能得到了巨幅提升,整体表现比Hadoop集群最大性能提升近100倍。而2022年CDW ClickHouse 云原生弹性版的投入使用,还解决了数据分析中计算资源峰谷需求的问题,通过实现秒级的分时弹性 ,将日间闲置的离线计算资源调度起来应对日间高峰期的在线分析业务,提高整个系统的资源利用率,实现降本提效。

马文博总结称,CDW ClickHouse升级版不仅在性能、配套功能、运维等方面提供了更佳的产品体验,同时其集群可靠性、计算节点类型、存储类型等方面的优势,也为用户提供了丰富的选择。腾讯云期望通过CDW ClickHouse,为企业日益广泛的业务场景提供领先的大数据分析服务,从而推动企业降本增效与业务创新成长。