这篇文章的起因是在于之前考察cross entroy相关的内容的时候，发现工具调用的太多了导致很多基础的内容被搞得生疏了，因此，就打算整两篇笔记来好好整理一下激活函数、损失函数等一些比较基础的概念性的东西，打算是分这几个...

fastText大约是NLP文本分类任务中最简单最直观的模型架构之一了，其原始文献详见参考链接2，facebook也提供了相应的开源工具，可以相当便利地用来训练一些nlp分类模型。网上其实已经有了不少有关fasttext模型的介绍，比如下...

前面介绍了能够对连续值进行预测的简单线性回归模型，并使用梯度下降算法进行迭代求解。当然深度学习不仅能够处理连续值预测的回归问题，还能够处理预测固定离散值的分类问题。分类问题的一个典型应用就是自动识别图像中...

本节先介绍梯度下降算法，这是因为梯度下降算法是深度学习（DeepLearning ）的核心精髓，这也是为什么有一些专家称深度学习为 Gradient Programing 的原因所在。「学到后面就会发现其实整个深度学习是依靠梯度下降算法支撑起...

2002年 Torch 框架发布，Torch 是一个基于 BSD License 的开源机器学习框架，但是由于 Torch 框架支持的是比较小众的 Lua 开发语言，因此并没有大范围的流行起来。...

介绍完梯度下降算法，接下来通过具体的编程实现简单线性回归（对于只有一个样本特征的回归问题，我们称之为简单线性回归）。为了更好的介绍简单简单线性回归案例，将实现简单线性回归分成四个关键步骤：...

大家好呀，在过去的半年到一年时间里，我分享了一些算法解读，算法优化，模型转换相关的一些文章。这篇文章是自己开启学习深度学习编译器的第一篇文章，后续也会努力更新这个系列。这篇文章是开篇，所以我不会太深入讲解TVM的知...

这篇文章描述了CNN的自注意力。对于这种自注意力机制，它可以在而不增加计算成本的情况下增加感受野。

内容提要：为了解决视频画面卡顿、不够顺畅等问题，视频插帧大法应运而生。英伟达提出的 Super SloMo 方法在众多方法中一骑绝尘，对于一段普通设备录制的视频，能「脑补」出高帧率慢动作视频。有了这一神器，视频制作的门槛得...

对于不同人群可能有不同的答案，科研人员可能更偏爱pyTorch，因其简单易用，能够快速验证idea来抢占先机发论文。