参考：https://borgwang.github.io/dl/2019/09/15/autograd.html

近日，《自然通讯》（Nature Communications）以“Aerosol-boundary-layer-monsoon interactions amplify semi-direct effect of biomass smoke on low cloud formation in Southeast As...

利用赫布理论和多尺度处理直觉设计一种增加深度和宽度的提高内部计算资源利用率的（同时保持了计算预算不变）网络。GoogleNet在ImageNet分类比赛的Top-5错误率降到了6.7%。...

前一篇文章介绍了很多FM系列的方法，但是FM通过特征之间的两两关系来构建交叉特征，这些都是低阶特征组合。谷歌提出DCN，除了DNN部分，在显示构造特征的部分进行多层cross network进行特征的交叉。...

这里作者用到了一个新的激活函数，当然不是作者提出的。通常我们采用softmax来做最后的激活函数，或者作为注意力机制的归一化函数。但是softmax的归一化方式会为向量中的每一个元素都赋值，即他不会存在0的值，顶多是很小，比...

sqlfilter为查询条件，如查询layer图层中，属性字段ID<10的要素：searchFeatures(axMapControl1, “ID < 10”, layer);

在任何程序（可以向外延伸到其他很多领域）的生命周期中，复杂性都会不可避免地增加。 程序越大，工作的人越多，管理复杂性就越困难，程序员在修改系统时将所有相关因素牢记在心中变得越来越难；这会减慢开发速度并导致错误，从而进...

没设备，没法试试ndp，不知道dis ndp是什么效果，和dis lldp 。有什么区别呢。

1.如果在迭代的100轮以内，出现NaN，一般情况下的原因是因为你的学习率过高，需要降低学习率。可以不断降低学习率直至不出现NaN为止，一般来说低于现有学习率1-10倍即可。...

随着模型规模的扩大，单卡显存容量无法满足大规模模型训练的需求。张量模型并行是解决该问题的一种有效手段。本文以Transformer结构为例，介绍张量模型并行的基本原理。...