深度学习Keras保存模型(当包含自定义层时)

20210409 -

0.引言

一般来说,如果没有什么特殊情况,那么在进行保存模型的时候,通过调用一些api进行保存即可,在文章《深度学习的基础知识与问题汇总》简单介绍了一种方式,直接保存模型,并重新载入。

但是在今天的实验中,出现的需求就是,如果定义的模型中,包含了用户自定义的层就会报错,具体情况见[1],在保存模型的时候没有问题,但是载入时就会报错。
简单说明一下实验环境

python 3.6.8
tensorflow-gpu 2.3.1
Keras 2.4.3

1. 加载模型报错:未定义层

在[1]中,如果没有对自定义的层进行一系列的规定,那么在加载模型的时候, 就会报错为定义层。

ValueError: Unknown layer: CustomLayer

上面这种问题使用的api是load_model,通过这种方式加载整个模型以及各种权值,针对这种错误,可以通过两种方法来解决。在问答[2]中都提到了,一种是在加载模型的时候,在api指定自定义类,如下:

new_model = tf.keras.models.load_model('model.h5', custom_objects={'CustomLayer': CustomLayer})

可能如果你使用了自定义的损失函数,也需要将这部分内容传输进去。
而另外一种方法更方便,针对如果定义了多个自定义内容:

import tensorflow as tf

@tf.keras.utils.register_keras_serializable()
class CustomLayer(tf.keras.layers.Layer):
    def __init__(self, k, **kwargs):
        self.k = k
        super(CustomLayer, self).__init__(**kwargs)

    def get_config(self):
        config = super().get_config()
        config["k"] = self.k
        return config

    def call(self, input):
        return tf.multiply(input, 2)

在自定义层上加上修饰器。

注意看,这里他自定义类的时候,上面这些要实现的函数。最重要的是,将自己的参数在函数get_config中进行保存。具体可以看[2]的方式,可以以他的编程方式作为模板,将模型保存起来,其中还包含了参数初始化的内容,而且可以看到在build过程中引入的add_weight不用在get_config中声明。

2. 保存权值

本次实验中,最后使用的方式是仅仅保存权值,反正逻辑上都得先定义这个模型。使用的方式是在训练的时候加入了保存模型的回调函数。

参考

[1]Saving Keras models with Custom Layers
[2]Not able to load a saved model with custom layer

  • 2
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
Keras中可以通过自定义网络来实现更加灵活的深度学习模型保存模型时需要注意以下几个步骤: 1. 创建自定义网络并定义其前向传递方法。 2. 在模型中添加自定义,并编译模型。 3. 训练模型保存模型权重。 4. 加载模型并使用。 下面是一个示例代码,展示了如何在Keras保存自定义模型: ```python import keras from keras.layers import Layer from keras.models import Model # 自定义网络 class CustomLayer(Layer): def __init__(self, units=32, **kwargs): self.units = units super(CustomLayer, self).__init__(**kwargs) def build(self, input_shape): self.kernel = self.add_weight(name='kernel', shape=(input_shape[-1], self.units), initializer='uniform', trainable=True) super(CustomLayer, self).build(input_shape) def call(self, inputs): return keras.backend.dot(inputs, self.kernel) # 创建模型 inputs = keras.Input(shape=(784,)) x = keras.layers.Dense(64, activation='relu')(inputs) x = CustomLayer(32)(x) outputs = keras.layers.Dense(10, activation='softmax')(x) model = Model(inputs=inputs, outputs=outputs) # 编译模型 model.compile(optimizer='adam', loss='categorical_crossentropy', metrics=['accuracy']) # 训练模型保存权重 model.fit(x_train, y_train, epochs=10) model.save_weights('my_model_weights.h5') # 加载模型权重并使用 model.load_weights('my_model_weights.h5') ``` 在这个示例中,自定义`CustomLayer`是一个简单的全连接,用于将输入张量与自定义内核相乘。我们在模型中添加了这个自定义,并将其与其他常规(如全连接和softmax)结合使用,以创建一个完整的分类模型。然后,我们编译模型并训练它。最后,我们保存模型的权重并加载它们,以便我们可以在不重新训练模型的情况下使用模型

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值