最新 最热

Oceanus 在腾讯微视数据的实践-统计某时间段内的uv、pv

在实时计算中,经常会遇到需要计算某个时间段内的pv、uv这类需求,完成该类需求有多种方式,本文以微视数据端内计算启动数据的pv、uv为应用场景,来介绍常用的两种实现方式。...

2021-11-02
1

你在被窝里刷手机岁月静好,一个​“神秘引擎”却在远方和时间赛跑

1981年,一群年轻人用红油漆把这12个字刷在三合板上,立在了刚刚成立不久的深圳特区蛇口工业园。

2021-11-01
1

Flink状态管理与Checkpoint实战——模拟电商订单计算过程中宕机的场景,探索宕机恢复时如何精准继续计算订单

为了模拟生产环境中实时产生的订单数据,这里我们自己定义一个数据源来源源不断的产生模拟订单数据

2021-11-01
1

Flink 实践教程:入门(3):读取 MySQL 数据

作者:腾讯云流计算 Oceanus 团队 流计算 Oceanus 简介 流计算 Oceanus 是大数据产品生态体系的实时化分析利器,是基于 Apache Flink 构建的具备一站开发、无缝连接、亚秒延时、低廉成本、安全稳定等特点的企业级实时大...

2021-11-01
1

flink1.13集群搭建,Standalone,HA高可用部署

可以看到有3个Task Managers,1个Job Manager 为bigdata1

2021-11-01
1

TiFlink:使用 TiKV 和 Flink 实现强一致的物化视图丨TiDB Hackathon 项目分享

本文为 TiDB Hackathon 2020 比赛中 TiFlink 项目最新进展的介绍,使用 TiKV 和 Flink 实现了强一致的物化视图的功能。

2021-10-28
1

hadoop-3:原生方式在aws搭建生产级hadoop-flink集群

n先部署一台机器,制作镜像,然后通过这个镜像去创建其他的EC2实例,最后完成配置与启动。

2021-10-28
1

2021年总结实时数仓最新架构图

1基于Flink的滴滴实时数仓实践分享嘉宾:潘澄,滴滴基础平台 资深研发工程师分享大纲:整体概况业务实践平台&引擎总结反思未来规划

2021-10-27
1

数据同步工具之FlinkCDC/Canal/Debezium对比

数据准实时复制(CDC)是目前行内实时数据需求大量使用的技术,随着国产化的需求,我们也逐步考虑基于开源产品进行准实时数据同步工具的相关开发,逐步实现对商业产品的替代。本文把市面上常见的几种开源产品,Canal、Debezium、...

2021-10-27
1

Flink SQL高效Top-N方案的实现原理

Top-N是我们应用Flink进行业务开发时的常见场景,传统的DataStream API已经有了非常成熟的实现方案,如果换成Flink SQL,又该怎样操作?好在Flink SQL官方文档已经给出了标准答案,我们只需要照抄就行,参考链接:...

2021-10-27
1