BatchNorm

Batch Normalization 解读 ^ _ ^

Batch Normalization

Batch Normalization: Accelerating Deep Network Training by Reducing Internal Covariate Shift

batchnorm原理及代码详解

Internal Covariate Shift

Whitening

白化 Whitening

输入数据集X，经过白化处理后，新的数据X’满足两个性质：
(1)特征之间相关性较低；
(2)所有特征具有相同的方差。