最新 最热

Flink SQL UDF重复调用问题解决方案

UDF重复调用的问题在某些情况下可能会对Flink SQL用户造成困扰,例如下面的SQL语句:

2023-05-31
1

Flink动态CEP之规则停用以及任务恢复

前面已经实现了Flink动态CEP增、改的功能,既然可以增、改,那必然少不了删,但是有了删,必然可能会出现在用规则数少于原定的最少规则数,针对与这种情况,任务是应该要正常运行的,故将规则停用和任务恢复放在一块儿了...

2023-05-26
1

记录一次由于Jar包冲突导致的神奇问题

今天同事找我帮忙看一个Flink的问题,现象是前几天还能提交的客户端,就在今天突然提交不了作业了,报错提示大概如下(公司的东西涉密)

2023-05-23
1

Flink动态CEP之EventTime

由于测试案例数据量较小,为了防止不同task之间的watermark影响,导致迟迟不出数据,暂时将并行度设置为1

2023-05-22
1

Flink动态CEP之流式获取规则以及动态更新规则

创建Flink任务,从socket中获取事件及规则,从localhost:8888中获取事件,从localhost:6666中获取规则

2023-05-22
1

Flink动态CEP Demo

使用动态CEP处理数据,分别传入事件流和配置流,配置动态生成Pattern并再DynamicOperator生成状态机等待事件进入,匹配

2023-05-18
1

数据中心互联光网络之数据实时计算

本⽂主要针对波分运营管理系统展开介绍,即波分事件中⼼主要⽬的与技术⼿段浅谈。⽽开放光系统运营关键核⼼就是事件(event),运营事件的⽬标是⼀个事件解决⽹络的⼀个具体的问题。事件中⼼则是将⽹络所经历的所有事件准确...

2023-05-12
0

某云平台Flink日志按Job名称收集到ES

使用ES来查询业务日志在开发中是非常常见的一种方式,典型的解决方案是ELK,已经非常成熟了。Flink是一个比较年轻的开源项目,已经发展了好几年,但是周边的生态还是不是很完善,比如日志收集其实不太友好,比如session模式想要...

2023-05-10
1

Flink任务重启策略设置

1)重启策略,都有重试次数和重试之间等待时间的规定,不同点在于,分别限定了最大的失败次数和规定时间内失败次数。具体根据场景设置

2023-05-09
1

Flink中Table语法的聚合操作

该示例中展示了Flink Table内置的count/sum/max/min/avg等聚合方法的使用,并在最后展示了如何使用自定义聚合函数。

2023-04-27
1