最新 最热

Flink基于两阶段聚合及Roaringbitmap的实时去重方案

去重是大数据计算中的常见场景,本文介绍了Flink结合数据倾斜问题的一般性解决方案——两阶段聚合,以及位图(Bitmap)的优化版数据结构——Roaringbitmap给出的一种实时去重解决方案,并在最后与其他方案进行了对比。...

2023-01-03
3

ChatGPT 浏览器插件实现思路解析

过去一周,ChatGPT 是机器学习领域最受关注的话题,随着它的热度不断上升,成功出圈引起了人们的广泛关注和讨论。在惊讶于它的性能和能力的同时,很多开发者也纷纷利用 ChatGPT 的技术,开发出各种有意思的应用。比如 《一大波...

2022-12-10
2

大数据架构系列:Amazon 大数据统一分析(分享)

#0 基于数据湖的数据架构图片评论:将数据收集到一起,解决数据孤岛问题。#1 以任何规模存储数据图片评论:吹了一下基于S3的数据湖的牛皮。#2 选择最佳性价比,专门构建分析服务图片评论:有好多框架和产品,每个解决特定场景的...

2022-12-08
1

[干货] 记一次Kibana报告生成失败的排查过程

本文描述问题及解决方法同样适用于 腾讯云 Elasticsearch Service(ES)。

2022-12-01
4

如何选择应用于日常及业务层面的代理?

共享代理 由多名用户同时使用,意味着其他用户也能访问这些代理。这会导致代理速度变慢,更重要的一点是,如果其他用户正与您访问相同的网站,那么被拦截的概率将变高。...

2022-11-25
1

大数据架构系列:Clickhouse + Kafka 的方案组合

如图1,是大家常见的一种用法,所有CH节点参与分发数据的原因是因为大家想把唯一Key相同的数据分发到同一个节点,好做一些SQL查询。

2022-11-21
2

【解决方案】智慧城市:新基建风口下的智慧城市安防方案报告

随着我国城镇化水平不断提升,城镇人口密度持续增大,城市公共安全风险提升,亟需加快城市公共安全管理方式升级转变,提升城市管理精细化水平。在5G、AI、云计算、大数据、物联网等新兴技术迭代更新的驱动下,智能化已经成为安...

2022-11-11
3

CTQ难理解?这样说你就明白了

在为企业设计新产品或服务时,关键质量特性(CTQ)是一个非常重要的工具。CTQ是客户指定为非常重要要求的产品或服务所需的可测量数据。

2022-10-31
2

微服务架构开发实战日志与监控:微服务日志管理将面临的挑战

日志来自正在运行的进程的事件流。对于传统的JavaEE应用程序而言,有许多框架和库可用于日志记录。Java Logging (JUL)是Java自身所提供的现成选项。除此之外,Log4j、Logback和SLF4J也是其他一些流行的日志框架。...

2022-10-28
1

关于云流化系统-实时云渲染延时性的讨论

我们知道使用实时云渲染系统来做程序的流化,是将程序放在服务器上,用户终端的各种操作指令完成都是借助的服务器算力。而为了用户能拥有和本地安装类似的体验效果,指令执行和传回终端的时间就必须尽可能短,这是实时云渲染...

2022-10-26
3