生成预训Transformer2 (GPT-2)，顾名思义，是基于Transformer 的。它使用注意力机制，这意味着它学会关注与上下文最相关的前一个单词，以便预测下一个单词。...
myseed = 45216 使用方法： 为CPU中设置种子，生成随机数 torch.manual_seed(myseed) 为特定GPU设置种子，生成随机数 torch.cuda.manual_seed(myseed) 为所有GPU设置种子，生成随机数 torch.cuda.manual_seed_al......
torch.matmul(input, other, out = None) 函数对 input 和 other 两个张量进行矩阵相乘。torch.matmul 函数根据传入参数的张量维度有很多重载函数。为了方便后续的介绍，将传入 input 参数中的张量命名为 a，而传入 othe...
torch.chunk(input, chunks, dim = 0) 函数会将输入张量（input）沿着指定维度（dim）均匀的分割成特定数量的张量块（chunks），并返回元素为张量块的元组。torch.chunk 函数有三个参数：...
文章目录1. nn模块2. torch.optim 优化器3. 自定义nn模块4. 权重共享参考 http://pytorch123.com/1. nn模块import torchN, D_in, Hidden_size, D_out = 64, 1000, 100, 10torch.nn.Sequ...
文章目录音频合成和分析torch音频合成和分析torch# -*- coding:utf-8 -*-# /usr/bin/python'''@Author : Errol @Describe: @Evn : @Date : - '''import torchimpor......
文章目录numpy 构建network torch 构建nnnumpy 构建network# -*- coding:utf-8 -*-# /usr/bin/python'''------------------------------------------------- File Name ...
前面已经介绍了 index_select 和 mask_select 两个选择函数，这两个函数通过一定的索引规则从输入张量中筛选出满足条件的元素值，只不过 index_select 函数使用索引 index 的索引规则，而 mask_select 函数使用布尔掩码 ma...
创建元素值为全 0 或全 1 的张量是非常常见的初始化手段，通过 torch.zeros() 和 torch.ones() 函数即可创建任意形状，且元素值全为 0 或全为 1 的张量。
以前我浏览博客的时候记得别人说过，BCELoss与CrossEntropyLoss都是用于分类问题。可以知道，BCELoss是Binary CrossEntropyLoss的缩写，BCELoss CrossEntropyLoss的一个特例，只用于二分类问题，而CrossEntropyLoss可以用于二...
