模型自变量增加后，即便使用聚类等手段进行变量压缩，也不能将自变量的相关性完全剔除，这便会导致具有相关性的自变量溜进模型。由于自变量间关系不同，建模所选择的策略也会不同，模型的结果相对也会有较大差异，SAS中一般会使...

统计模型的一般形式是Y=m(X)+e。其中Y为输出变量、响应变量、因变量、被解释变量；m为均值；e为不可控因子，可以理解为噪声。故模型等式右边是用X组成的函数去描述Y的均值，即模型是在平均的意义下去描述自变量与因变量间的...

数据挖掘的理论背后，几乎离不开线性代数的计算，如矩阵乘法、矩阵分解、行列式求解等。本文将基于numpy模块实现常规线性代数的求解问题，需要注意的是，有一些线性代数的运算并不是直接调用numpy模块，而是调用numpy的子模块l...

梯度下降无疑是大多数机器学习(ML)算法的核心和灵魂。我绝对认为你应该花时间去理解它。因为对于初学者来说，这样做能够让你更好地理解大多数机器学习算法是如何工作的。另外，想要培养对复杂项目的直觉，理解基本的概念也...

来自弗吉尼亚大学的Matthew J Barrett等研究者在J Neurol Neurosurg Psychiatry杂志上发文：导致帕金森（Parkinson disease，PD）患者痴呆的主要原因之一是富含胆碱能神经元的基底前脑的退化，因此该研究针对Meynert基底核（胆碱...

机器学习的应用已经非常广泛，其中之一就是预测时间序列。最有趣(或许也是最赚钱)的预测时间序列之一的当属股价了。

猛着看一下这个公式是不是觉得眼熟，这不就是线性回归的损失函数嘛！！！ 对，在线性回归的时候我们的目的就是让这个损失函数最小。那么模型做出来了，我们把损失函数丢到测试集上去看看损失值不就好了嘛。简单直观暴力！...

注一般线性回归中，使用的假设函数是一元一次方程，也就是二维平面上的一条直线。但是很多时候可能会遇到直线方程无法很好的拟合数据的情况，这个时候可以尝试使用多项式回归。多项式回归中，加入了特征的更高次方（例如平方项...

在机器学习和统计领域，线性回归模型是最简单的模型之一。这意味着，人们经常认为对线性回归的线性假设不够准确。

在前面的时间，我学习了Logistic回归，这是用来进行二分类学习的一种算法。虽然按照书上的介绍，编写了算法实现代码，但对其原理并不清楚，总感觉没有理解透。于是我又找到吴恩达的Marchine Learning课程，再次学习了线性回归和L...