成本直降50%!为了做好leader,这位同学拼了!

2024-08-16 17:52:05 浏览数 (3)

近日, IDC发布首份大数据湖仓市场报告:

经过能力和战略维度综合评估

腾讯云入选“领导者”类别!

图片图片

首次“评选”就被晋升Leader,鹅厂悄悄做了哪些努力?

//更快:百万条数据秒级入湖

TCHouse(腾讯云数据仓库) 和 DLC (腾讯云数据湖计算)在元数据层面实现互通互访,让大数据更快跑完业务应用的“最后一公里”。 

图片图片

其中,DLC在业界率先实现百万条数据秒级入湖;TCHouse入湖查询,十亿级数据单次耗时只需 1.5s 。

别急,还不够。

鹅厂自研大数据高性能计算引擎Meson,全面优化了Spark的向量化计算能力,相当于插入了加速卡,令大数据处理性能提升2.27倍。

图片图片

//更省:整体成本节省超50%

大数据处理既要性能高,又要会省钱,就要做到“精打细算”。

鹅厂混合存储“自适应Shuffle”技术,可自动根据实时负载让集群时刻保持最优水平。在不降低集群性能的同时,整体成本节省超50%。

图片图片

//更易用:数据管理“0门槛”

TCHouse和 DLC 作为“一家人”,对各自“家底”早已心中有数。

在大数据处理时,避免了数据在湖、仓之间的反复搬运,使用标准语句即可直接开展数据分析。

WeData(数据治理平台)是个“百宝箱”,数据建模、集成、开发、资产管理……一个平台通通搞定。

出现故障时,管理员也不用再为软硬件的复杂结构“挠头”,系统可自动执行故障排查、修复等各种运维操作。

图片图片

为了做好“Leader”,鹅厂在实战中也“久经考验”: 

我们帮助猫眼将海量数据入仓时间从天级提升为分钟级,部分任务执行效率提升20~40%。

我们与蔚来汽车打造了实时湖仓与统一数据开发治理平台,在自动驾驶业务场景中,每天可运行上万个任务实例,消耗的运维资源减少了60%。

2024年才刚过去一半,在政府、汽车、互联网、AI、证券、审计、医疗等多个行业,就有过百家“新伙伴”选择了腾讯云。

感谢认可!我们将再接再厉,持续为各行各业提供更轻快、易用、智能的大数据服务。

0 人点赞