最新 最热

2021年大数据Flink(九):Flink原理初探

它扮演的是集群管理者的角色,负责调度任务、协调 checkpoints、协调故障恢复、收集 Job 的状态信息,并管理 Flink 集群中的从节点 TaskManager。

2021-10-11
0

2021年大数据Flink(十一):流批一体API Source

env.readTextFile(本地/HDFS文件/文件夹);//压缩文件也可以

2021-10-11
0

2021年大数据Flink(十四):流批一体API Connectors JDBC

Apache Flink 1.12 Documentation: JDBC Connector

2021-10-11
1

2021年大数据Flink(十五):流批一体API Connectors ​​​​​​​Kafka

Flink 里已经提供了一些绑定的 Connector,例如 kafka source 和 sink,Es sink 等。读写 kafka、es、rabbitMQ 时可以直接使用相应 connector 的 api 即可,虽然该部分是 Flink 项目源代码里的一部分,但是真正意义上不算作 ...

2021-10-11
0

2021年大数据Flink(十六):流批一体API Connectors ​​​​​​​​​​​​​​Redis

通过flink 操作redis 其实我们可以通过传统的redis 连接池Jpoools 进行redis 的相关操作,但是flink 提供了专门操作redis 的RedisSink,使用起来更方便,而且不用我们考虑性能的问题,接下来将主要介绍RedisSink 如何使用。...

2021-10-11
0

2021年大数据Flink(十七):Flink四大基石

Flink之所以能这么流行,离不开它最重要的四个基石:Checkpoint、State、Time、Window。

2021-10-11
0

2021年大数据Flink(十八):Flink Window操作

在流处理应用中,数据是连续不断的,有时我们需要做一些聚合类的处理,例如:在过去的1分钟内有多少用户点击了我们的网页。

2021-10-11
0

2021年大数据Flink(二十二):Time与Watermaker

假设,你正在去往地下停车场的路上,并且打算用手机点一份外卖。选好了外卖后,你就用在线支付功能付款了,这个时候是11点59分。恰好这时,你走进了地下停车库,而这里并没有手机信号。因此外卖的在线支付并没有立刻成功,而支付系...

2021-10-11
0

2021年大数据Flink(二十三):​​​​​​​Watermaker案例演示

注意:一般我们都是直接使用Flink提供好的BoundedOutOfOrdernessTimestampExtractor

2021-10-09
0