批规范化

【词语拼音】pī guī fàn huà

【词语繁体】批規範化

【词语结构】ABCD式词语

【词语字数】四字词语

【网络解释】
批规范化是指在每次随机梯度下降时，通过mini-batch来对相应的activation做规范化操作，使得结果（输出信号各个维度）的均值为0，方差为1. 而最后的“scale and shift”操作则是为了让因训练所需而“刻意”加入的BN能够有可能还原最初的输入，从而保证整个网络的capacity。