解决cannot import name ‘BatchNormalization‘ from ‘keras.layers.normalization‘

问题描述

当我尝试导入Keras的​​BatchNormalization​​模块时，出现了以下错误信息：

cannot import name 'BatchNormalization' from 'keras.layers.normalization' 

问题分析

经过查阅资料，发现是版本兼容性问题。我的keras版本是2.10.0，tensorflow_gpu是2.10.1，是keras 库更新后部分导入方式发生了改变，无法按照原方式导入包，BatchNormalization 导入方式需要更改。

扩展

Batch Normalization简介

Batch Normalization于2015年由 Google 提出数据归一化方法，往往用在深度神经网络中激活层之前。其规范化针对单个神经元进行利用网络训练时，一个 mini-batch 的数据来计算该神经元的均值和方差,因而称为 Batch Normalization。BatchNormalization层在每个batch上将前一层的激活值重新规范化，即使得其输出数据的均值接近0，其标准差接近1。Batch Normalization是Normalization 方法中的一种，其他方法有：

• Layer Normalization —— 横向规范化
• Weight Normalization —— 参数规范化

BatchNormalization的作用

（1）先对输入神经网络的数据其做平移和伸缩变换，将数据分布规范化成在固定区间范围的标准分布

（2）可以加快模型训练时的收敛速度，使得模型训练过程更加稳定，避免梯度爆炸或者梯度消失

（3）起到一定的正则化作用，几乎代替了Dropout。控制过拟合，可以少用或不用Dropout和正则

（4）降低网络对初始化权重不敏感

（5）允许使用较大的学习率

解决方法

要解决这个错误，需要根据Keras的版本进行不同的处理。

旧版本的正确的代码是：

from keras.layers.normalization import BatchNormalization

新版本的正确的代码是：

from keras.layers.normalization.batch_normalization_v1 import BatchNormalization

                 
原文链接：https://blog.csdn.net/nings666/article/details/134585159