深度学习让计算机视觉任务的性能到达了一个前所未有的高度。但，复杂模型的同时，带来了高额的存储空间、计算资源消耗，使其很难落实到各个硬件平台。...

随着互联网的发展，人们对高清图片的需求也在不断增加，在保证图像画质的情况下最大程度降低图像体积已成为行业发展趋势。

最后一起看下训练的结果日志，如下图所示，可以看到 testAcc = 93.86%，此处用的是双卡 2080Ti，比单卡来说，训练的 batch_size 更大，所以准确率略微提升:

为了解决 cifar100 val_acc 过低的问题，本质上是过拟合问题，所以特地去 papers with code 网站上看了下 cifar100 benchmark 目前第一名做到了多少，如下图所示，val_cc = 0.96，有点东西哈，所以目前要做的是研究 SAM (Sharpne...

在科学研究中，从方法论上来讲，都应“先见森林，再见树木”。当前，人工智能学术研究方兴未艾，技术迅猛发展，可谓万木争荣，日新月异。对于AI从业者来说，在广袤的知识森林中，系统梳理脉络，才能更好地把握趋势。为此，我们精选国内外优...

目前深度学习中的神经网络种类繁多，用途各异。由于这个分支在指数增长，跟踪神经网络的不同拓扑有助于更深刻的理解。本文将展示神经网络中最常用的拓扑结构，并简要介绍其应用。...

flower_photos 数据量比较小，所以 simple_cnn 可以在 trainset 上拟合到 0.99，意思就是数据复杂度 < 模型复杂度

Paracel是豆瓣开发的一个分布式计算框架，它基于参数服务器范式，用于解决机器学习的问题：逻辑回归、SVD、矩阵分解（BFGS，sgd，als，cg），LDA，Lasso...。...

卷积神经网络 – CNN 最擅长的就是图片的处理。它受到人类视觉神经系统的启发。

上图我们可以发现，对于simple_cnn来说，数据增强有很明显的作用，可以显著提高val_acc，也就是模型的泛化性。