最新 最热

2021年大数据Flink(二十五):Flink 状态管理

例如,之前下面代码,直接使用即可,不需要像SparkStreaming那样还得自己写updateStateByKey

2021-10-09
0

2021年大数据Flink(二十六):​​​​​​​State代码示例

下图就 word count 的 sum 所使用的StreamGroupedReduce类为例讲解了如何在代码中使用 keyed state:

2021-10-09
0

2021年大数据Flink(二十七):Flink 容错机制 Checkpoint

一般指一个具体的Operator的状态(operator的状态表示一些算子在运行的过程中会产生的一些历史结果,如前面的maxBy底层会维护当前的最大值,也就是会维护一个keyedOperator,这个State里面存放就是maxBy这个Operator中的...

2021-10-09
0

2021年大数据Flink(二十八):Flink 容错机制 自动重启策略和恢复

如果配置了Checkpoint,而没有配置重启策略,那么代码中出现了非致命错误时,程序会无限重启

2021-10-09
0

2021年大数据Flink(三十):Flink ​​​​​​​Table API & SQL 介绍

https://ci.apache.org/projects/flink/flink-docs-release-1.12/dev/table/

2021-10-09
0

2021年大数据Spark(四十四):Structured Streaming概述

Apache Spark在2016年的时候启动了Structured Streaming项目,一个基于Spark SQL的全新流计算引擎Structured Streaming,让用户像编写批处理程序一样简单地编写高性能的流处理程序。...

2021-10-09
1

Flink SQL 如何定义时间属性

本文将解释如何在 Flink 的 Table API 和 SQL 中为基于时间的操作定义时间属性。

2021-10-08
1

Oceanus 实践-从0到1接入 CKafka SQL 作业

流计算 Oceanus 是位于云端的流式数据汇聚、计算服务。只需几分钟,您就可以轻松构建网站点击流分析、电商精准推荐、物联网 IoT 等应用。流计算基于 Apache Flink 构建,提供全托管的云上服务,您无须关注基础设施的运维,并...

2021-09-30
1

Oceanus 实践-从0到1接入 COS SQL 作业

流计算 Oceanus 是位于云端的流式数据汇聚、计算服务。只需几分钟,您就可以轻松构建网站点击流分析、电商精准推荐、物联网 IoT 等应用。流计算基于 Apache Flink 构建,提供全托管的云上服务,您无须关注基础设施的运维,并...

2021-09-30
1