最新 最热

1行代码消除PyTorch的CUDA内存溢出报错,这个GitHub项目刚发布就揽星600+

现在,有人写了一个PyTorch wrapper,用一行代码就能“无痛”消除这个bug。

2021-12-22
1

计算 Python 代码的内存和模型显存消耗的小技巧

了解Python代码的内存消耗是每一个开发人员都必须要解决的问题,这个问题不仅在我们使用pandas读取和处理CSV文件的时候非常重要,在我们使用GPU训练的时候还需要规划GPU的显存使用。尤其是我们在白嫖使用kaggle和colab时...

2021-12-21
0

[源码解析] PyTorch 分布式(18) --- 使用 RPC 的分布式管道并行

在前面的文章之中,我们已经学习了PyTorch 分布式的基本模块,接下来我们通过几篇文章来看看如何把这些模块应用到实践之中,顺便把PyTorch分布式逻辑整体梳理一下。本文介绍如何使用 RPC 来完成分布式管道并行。...

2021-12-21
1

[源码解析] PyTorch 分布式(16) --- 使用异步执行实现批处理 RPC

在前面的文章之中,我们已经学习了PyTorch 分布式的基本模块,接下来我们通过几篇文章来看看如何把这些模块应用到实践之中,顺便把PyTorch分布式逻辑整体梳理一下。本文介绍如何使用异步执行操作来实现批处理 RPC,大家可以...

2021-12-17
1

[源码解析] PyTorch 分布式(17) --- 结合DDP和分布式 RPC 框架

在前面的文章之中,我们已经学习了PyTorch 分布式的基本模块,接下来我们通过几篇文章来看看如何把这些模块应用到实践之中,顺便把PyTorch分布式逻辑整体梳理一下。本文介绍如何把DDP和RPC framework结合起来。...

2021-12-17
1

轻松学Pytorch之量化支持

模型的边缘端部署需要深度学习模型更加的小型化与轻量化、同时要求速度要足够快!一个量化之后的模型可以使用整数运算执行从而很大程度上降低浮点数计算开销。Pytorch框架支持8位量化,相比32位的浮点数模型,模型大小对内...

2021-12-17
0

AI 开源 Texar-PyTorch:卡内基梅隆大学的研究者开源的通用机器学习框架

Texar-PyTorch 对各类不同的机器学习任务有着广泛的支持,尤其是自然语言处理(NLP)和文本生成任务。

2021-12-17
1

[源码解析] PyTorch 分布式(15) --- 使用分布式 RPC 框架实现参数服务器

在前面的文章之中,我们已经学习了PyTorch 分布式的基本模块,接下来我们通过几篇文章来看看如何把这些模块应用到实践之中,顺便把PyTorch分布式逻辑整体梳理一下。本文介绍如何使用分布式 RPC 框架实现参数服务器。...

2021-12-15
1

[源码解析] PyTorch 分布式(14) --使用 Distributed Autograd 和 Distributed Optimizer

在前面的文章之中,我们已经学习了PyTorch 分布式的基本模块,接下来我们通过几篇文章来看看如何把这些模块应用到实践之中,顺便把PyTorch分布式逻辑整体梳理一下。本文介绍如何把分布式自动微分和分布式优化器结合起来训...

2021-12-15
1

太强了,机器学习代码,自动生成!

在Streamlit官方网站,有很多开源的应用,包括NLP、数据可视化、音频处理、机器学习建模及训练等等

2021-12-15
1