最新 最热

[源码解析] PyTorch 分布式(17) --- 结合DDP和分布式 RPC 框架

在前面的文章之中,我们已经学习了PyTorch 分布式的基本模块,接下来我们通过几篇文章来看看如何把这些模块应用到实践之中,顺便把PyTorch分布式逻辑整体梳理一下。本文介绍如何把DDP和RPC framework结合起来。...

2021-12-17
1

日志管理详解

每个公司所用的日志框架形形色色。TLog宣称支持了主流的三大日志框架:log4j,log4j2,logback

2021-12-16
1

Kotlin十周年:Kotlin 1.5稳定版发布——2021年第一个大版本更新有何亮点?

Kotlin十周年:Kotlin 1.5稳定版发布——2021年第一个大版本更新有何亮点?

2021-12-16
1

YARN 简介

MR1.0 问题:采用的是master slave结构,master是JobTracker。Slave是TaskTracker、JobTracker整个集群只有一个,构建调度和资源管理,两个功能。每个节点上,可以通过一个TaskTracker控制本节点的资源管理和任务管理。每个Tas...

2021-12-16
1

[源码解析] PyTorch 分布式(15) --- 使用分布式 RPC 框架实现参数服务器

在前面的文章之中,我们已经学习了PyTorch 分布式的基本模块,接下来我们通过几篇文章来看看如何把这些模块应用到实践之中,顺便把PyTorch分布式逻辑整体梳理一下。本文介绍如何使用分布式 RPC 框架实现参数服务器。...

2021-12-15
1

[源码解析] PyTorch 分布式(14) --使用 Distributed Autograd 和 Distributed Optimizer

在前面的文章之中,我们已经学习了PyTorch 分布式的基本模块,接下来我们通过几篇文章来看看如何把这些模块应用到实践之中,顺便把PyTorch分布式逻辑整体梳理一下。本文介绍如何把分布式自动微分和分布式优化器结合起来训...

2021-12-15
1

原生RPC介绍

1、对于公司间的系统调用, 如果性能要求在100ms以上的服务,基于XML的SOAP协议 是一个值得考虑的方案。

2021-12-15
1

提高程序性能技巧详解

上面的工作线程,从磁盘读文件、再通过网络发送数据,数据从磁盘到网络,兜兜转转需要拷贝四次,其中CPU亲自搬运都需要两次。

2021-12-15
1

微服务架构 | 如何利用好日志做性能分析?

导读:做性能分析听到最多的歪理就是,服务做水平、垂直扩容、分表分库、读写分离、XX中间件、资源静态化等等但是归根到底这些方案都是为了尽可能减少对数据库的访问以及堆栈的释放,提高数据库IO的读写速度和程序的运行效...

2021-12-15
1

作为技术负责人,如何从0搭建公司后端技术栈

有点眼晕,以下只是我们会用到的一些语言的合集,而且只是语言层面的一部分,就整个后台技术栈来说,这只是一个开始,从语言开始,还有很多很多的内容。今天要说的后台是大后台的概念,放在服务器上的东西都属于后台的东西,比如使用...

2021-12-15
1