最新 最热

TensorRT | 在多个GPU中指定推理设备

说实话,之前我在笔记本上都一直都是只有一块N卡,所以没有过多关注过这个问题。然而昨天有个人问我,TensorRT怎么在多个GPU中指定模型推理GPU设备?我查了一下,发现官方有几个不同的解决方案,个人总结了一下,主要的做法有两种...

2023-08-22
1

PyTorch 中的多 GPU 训练和梯度累积作为替代方案

在本文[1]中,我们将首先了解数据并行(DP)和分布式数据并行(DDP)算法之间的差异,然后我们将解释什么是梯度累积(GA),最后展示 DDP 和 GA 在 PyTorch 中的实现方式以及它们如何导致相同的结果。...

2023-08-10
1

微软警告:若数据中心无法获得足够GPU,云服务恐将中断

7月30日消息,微软在日前发布的财报当中更新了一项风险因素,明确提到数据中心所需的GPU的供应安全的重要性,强调如果无法获得足够的GPU,云服务将会有中断危险。...

2023-08-09
1

谷歌自研芯片Tensor G3曝光:三星4nm工艺,9核CPU+10核GPU,性能全面提升!

6月5日消息,预计今年10月谷歌将推出 Pixel 8 系列新机,而这款新机将有望搭载谷歌新一代的自研处理器Tensor G3 SoC。根据国外网站 Android Authority 报导指出,Tensor G3 将会带来相当大的升级,拥有更新的CPU核心架构、新...

2023-08-09
1

【玩转 GPU】GPU如何是如何AI赋能,成为AI首选工具的

图形处理单元 (GPU) 已成为 AI 开发的关键。它们可以大大加快训练和部署 AI 模型所涉及的计算过程。

2023-06-23
1

【玩转 GPU】英伟达GPU架构演变

1999年,英伟达发布第一代GPU架构GeForce 256,标志着GPU时代的开始。随后,英伟达推出了Tesla、Fermi、Kepler、Maxwell、Pascal、Volta、Turing和Ampere等GPU架构,不断增强GPU的计算能力和程序性,推动GPU在图形渲染、...

2023-06-08
1

【玩转 GPU】本地部署大模型--chatGLM(尝鲜篇)

本文主要介绍ChatGLM-6B 的本地部署,提供更保姆级别的教程,让完全不懂技术的同学,也能在本地部署大模型~

2023-06-03
0

官方推荐 | 《2分钟带你认识腾讯云 GPU 云服务器》

关注腾讯云大学,了解最新行业技术动态 戳【阅读原文】查看55个腾讯云产品全集课程概述GPU 云服务器(GPU Cloud Computing,GPU)是提供 GPU 算力的弹性计算服务,具有超强的并行计算能力,作为 IaaS 层的尖兵利器,服务于深度学...

2023-05-29
1

CSS 强制启用 GPU 加速

最近在学校机房上前端课,用到了之前偶然看到的 CSS 的 GPU 渲染,性能肉眼可见提升。

2023-05-29
1

英特尔GPU制程路线图曝光:Celestial将由台积电3nm代工

5月3日消息,据Wccftech报道,根据领英上汇总的英特尔工程师完成及正在进行的产品清单,确认了英特尔接下来GPU的工艺规划,包括了独立显卡使用的GPU,还有集显的GPU模块,都将选择台积电代工。...

2023-05-09
1