最新 最热

实时监控:基于流计算 Oceanus ( Flink ) 实现系统和应用级实时监控

---- 作者:吴云涛,腾讯 CSIG 高级工程师 本文描述了如何使用腾讯云大数据组件来完成实时监控系统的设计和实现,通过实时采集并分析云服务器(CVM)及其 App 应用的 CPU和内存等资源消耗数据,以短信、电话、微信消息等方式实...

2021-10-14
1

Oceanus 实践-从0到1开发ClickHouse SQL作业

在 Oceanus 控制台的【集群管理】->【新建集群】页面创建集群,选择地域、可用区、VPC、日志、存储,设置初始密码等。

2021-10-11
0

【LFS 系列】从零开始 DIY Linux 系统:(六)构建 LFS 系统 - Linux-3.19 API 头文件

Linux API 头文件(在 linux-3.19.tar.xz 里)会将内核 API 导出给 Glibc 使用。

2021-10-08
0

流计算 Oceanus 限量1元秒杀,立省2000元

一、流计算 Oceanus 限量秒杀专享活动 二、什么是ETL ETL(Extract,Transform,Load)描述了将数据从源端经过抽取、转换、加载至目的端的过程。 企业收集到的原始数据通常存在数据缺失、数据结构混乱等问题,难以直接用来分...

2021-10-08
0

Oceanus 实践-消费 CMQ 主题模型数据源

实时即未来,最近在腾讯云流计算 Oceanus 进行Flink实时计算服务,以下为 Flink 消费腾讯云 CMQ 的数据实践。原文自Raigor,已获得授权,分享给大家~

2021-09-30
0

Oceanus 实践-从0到1接入 CKafka SQL 作业

流计算 Oceanus 是位于云端的流式数据汇聚、计算服务。只需几分钟,您就可以轻松构建网站点击流分析、电商精准推荐、物联网 IoT 等应用。流计算基于 Apache Flink 构建,提供全托管的云上服务,您无须关注基础设施的运维,并...

2021-09-30
0

Oceanus 实践-从0到1接入 COS SQL 作业

流计算 Oceanus 是位于云端的流式数据汇聚、计算服务。只需几分钟,您就可以轻松构建网站点击流分析、电商精准推荐、物联网 IoT 等应用。流计算基于 Apache Flink 构建,提供全托管的云上服务,您无须关注基础设施的运维,并...

2021-09-30
0

从一个诡异的 Bug 来看 Flink 快照和状态读取的流程

流计算 Oceanus 平台支持以 SQL 的方式提交作业,独享集群支持最新的 Flink 1.10 提供的新版 Blink Planner 语法。有一位客户写了一段代码,用到了 SQL 的 TopN 功能,语句类似于:...

2021-09-29
0

如何应对飞速增长的状态?Flink State TTL 概述

在流计算作业中,经常会遇到一些状态数不断累积,导致状态量越来越大的情形。例如,作业中定义了超长的时间窗口,或者在动态表上应用了无限范围的 GROUP BY 语句,以及执行了没有时间窗口限制的双流 JOIN 等等操作。对于这些情...

2021-09-29
0

Flink SQL 状态越来越多?Idle State Retention Time 特性概览

在上一篇文章中,介绍了 Flink State TTL 机制,这项机制对于应对通用的状态暴增特别有效。然而,这个特性也有其缺陷,例如不能保证一定可以及时清理掉失效的状态,以及目前仅支持 Processing Time 时间模式等等,另外对于旧版本...

2021-09-29
0