Spark的宽依赖和窄依赖是DAGScheduler将job划分为多个Stage的重要因素，每一个宽依赖都会划分一个Stage。

并行执行模式   推测执行模式   数据倾斜时开启负载均衡模式   map缓冲区大小   溢写磁盘百分比   开启combanier提前预聚合   设置reduce拉取数据的内存缓冲区大小   开启kryo序列化   使用Snappy压...

作者：housecheng  腾讯WXG工程师 |导语  解决金融风控数据监控“开发门槛高”“重复工作多”的痛点，实现PSI计算性能十倍速提升。 背景 在金融业务上，质量和稳定是生命线，我们需要对所有已经上线的风控要素，如策略、模型...

你会根据一个现有项目A复制一下搭建出另外一个类似框架的项目B，然后在项目B上进行业务逻辑开发。

.markdown-body{word-break:break-word;line-height:1.75;font-weight:400;font-size:15px;overflow-x:hidden;color:#333}.markdown-body h1,.markdown-body h2,.markdown-...

Celery是一个简单、灵活且可靠的，处理大量消息的分布式系统，专注于实时处理的异步任务队列，同时也支持任务调度。

| 导语本文主要是讲Linux的调度系统, 由于全部内容太多，分三部分来讲，本篇是中篇（主要讲抢占和时钟），上篇请看（CPU和中断）：Linux调度系统全景指南(上篇)，调度可以说是操作系统的灵魂，为了让CPU资源利用最大化，Linux设计了一套非...

2.消息队列CKafka：访问白名单配置可使用IP网段；支持在Partition维度设置offset；监控支持按带宽百分比进行监控；支持控制台查询消息。

导语：微服务架构的盛行，解决了系统上可用性、可扩展、可维护性上的问题，成为众多企业架构转型的不二之选。但在架构转型时，原有系统应该如何进行微服务拆分呢？要避免哪些陷阱呢？在本文中，腾讯云微服务架构师崔凯将为大家详细...

科技是推动社会发展的重要动力，技术是推动行业发展的重要支撑力量。为便于读者了解腾讯云中间件产品的最新动态，腾讯云中间件推出产品月报专栏，每月一期。本月的三项动态如下：...