keras 入门!一个例子立地成佛

一个例子

小编在GitHub上找到了一个基于卷积神经网络(CNN)的验证码识别项目,将关键的代码进行整理,去掉了无助于理解过程的代码。keras编程的过程可划分为六个阶段:数据预处理 → \rightarrow 定义神经网络结构 → \rightarrow 编译模型 → \rightarrow 训练网络 → \rightarrow 使用模型进行预测 → \rightarrow 进行数据后处理。

'''为了凸显keras编程的核心步骤,需要导入的库以及路径的定义不再列出'''
# 数据预处理--the 1st core step
# 将数据从本地文件加载到内存中,并进行格式化处理
data, label = load_data(pic_folder)
data_train, data_test, label_train, label_test = \
    train_test_split(data, label, test_size=0.1, random_state=0)
# 定义神经网络结构--the 2nd core step
# keras是模块化的添加层结构
inputs = layers.Input((40, 40, 3))
x = layers.Conv2D(32, 9, activation='relu')(inputs)
x = layers.Conv2D(32, 9, activation='relu')(x)
x = layers.MaxPool2D((2, 2))(x)
x = layers.Dropout(0.25)(x)
x = layers.Flatten()(x)
x = layers.Dense(640)(x)
x = layers.Dropout(0.5)(x)
out = layers.Dense(len(APPEARED_LETTERS), activation='softmax')(x)
model = Model(inputs=inputs, outputs=out)
# 编译模型--the 3rd core step
# 配置损失函数、优化目标等
model.compile(
    optimizer='adadelta',
    loss=['categorical_crossentropy'],
    metrics=['accuracy'],
)
# 训练神经网络--the 4th core step
# 开始训练神经网络,进行一些独立于网络结构之外的预处理,例如提前确认在计算的过程中对某些数据进行保存
his = model.fit(
        x_train, y_train, batch_size=128, epochs=100,
        validation_split=0.1, callbacks=[ModelCheckpoint(
    os.path.join(weight_folder, '{epoch:02d}.hdf5'))],
    )
# 基于模型的预测--the 5th core step
# 直接调用predict函数即可
model.load_weights(model_path)
data = get_testX()
out = model.predict(data)
# 数据后处理--the 6th core step
# 其实就是分析数据
# metrics数据结果
print(his.history)
# 可视化结果
tb_cb = keras.callbacks.TensorBoard(log_dir=log_filepath, write_images=1, histogram_freq=1)
cbks = [tb_cb] # cbks作为一个回调函数在执行fit函数时调用

六个阶段可以总结为两个部分

所有的六个阶段放在一起又可以分成两个大的部分,一个是模型的训练,包含前四个阶段,另一个是模型的应用,包含后两个阶段。

模型训练

我们建立的神经网络就是一个封闭的自循环的计算系统,如图1所示。图中的上下两部分分别对应着前向传播和反向传播:在进行前向传播的过程中,我们需要定义神经网络的结构,也就是第二个阶段要完成的任务;在进行反向传播的过程中,我们需要定义损失函数、优化目标等信息,也就是第三个阶段要完成的任务。相比于二三阶段,第一和第四阶段就显得不那么重要了,但也是必不可少的。在第一阶段我们要将数据转化成神经网络可识别的格式,在第四阶段,我们开始这个计算过程。

图1 神经网络计算流程
转自 https://towardsdatascience.com/lets-code-a-neural-network-in-plain-numpy-ae7e74410795
**模型应用**

在这一部分我们使用已经训练好的神经网络对测试数据进行预测,并通常使用一定的可视化手段对获得的数据进行预测,比如将loss的变化过程打印出来看看神经网络收敛的效果如何,看看多测试集上正确率的分位数等 等,如图所示。

图2-1 loss随时间变化

在这里插入图片描述

图2-2 分位数、均值、最值示意图
### 写在文末

我们在文章中给出的代码一般都是不能运行的,这么做只是为了更加地清晰对问题进行描述,还请见谅,我们会将可以运行的源代码放在GitHub上,以供参考。

GitHub地址:https://github.com/1173710224/keras-cnn-captcha
欢迎关注公众号BBIT
让我们共同学习共同进步!

在这里插入图片描述

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
addition_rnn.py 执行序列学习以执行两个数字(作为字符串)的添加。 antirectifier.py 演示如何为Keras编写自定义图层。 babi_memnn.py 在bAbI数据集上训练一个内存网络以进行阅读理解。 babi_rnn.py 在bAbI数据集上训练一个双支循环网络,以便阅读理解。 cifar10_cnn.py 在CIFAR10小图像数据集上训练一个简单的深CNN。 conv_filter_visualization.py 通过输入空间中的渐变上升可视化VGG16的过滤器。 conv_lstm.py 演示使用卷积LSTM网络。 deep_dream.py 深深的梦想在克拉斯。 image_ocr.py 训练一个卷积堆叠,后跟一个循环堆栈和一个CTC logloss函数来执行光学字符识别(OCR)。 imdb_bidirectional_lstm.py 在IMDB情绪分类任务上训练双向LSTM。 imdb_cnn.py 演示使用Convolution1D进行文本分类。 imdb_cnn_lstm.py 在IMDB情绪分类任务上训练一个卷积堆栈,后跟一个循环堆栈网络。 imdb_fasttext.py 在IMDB情绪分类任务上训练一个FastText模型。 imdb_lstm.py 在IMDB情绪分类任务上训练一个LSTM。 lstm_benchmark.py 比较IMDB情绪分类任务上不同的LSTM实现。 lstm_text_generation.py 生成尼采文字的文字。 mnist_acgan.py 在MNIST数据集上实现AC-GAN(辅助分类器GAN) mnist_cnn.py 在MNIST数据集上训练一个简单的convnet。 mnist_hierarchical_rnn.py 训练一个分级RNN(HRNN)来分类MNIST数字。 mnist_irnn.py Le等人在“以简单的方式初始化整流线性单元的反复网络”中再现具有逐像素连续MNIST的IRNN实验。 mnist_mlp.py 在MNIST数据集上训练一个简单的深层多层感知器。 mnist_net2net.py 在“Net2Net:通过知识转移加速学习”中再现带有MNIST的Net2Net实验。 mnist_siamese_graph.py 从MNIST数据集中的一对数字上训练暹罗多层感知器。 mnist_sklearn_wrapper.py 演示如何使用sklearn包装器。 mnist_swwae.py 列出了一个堆栈,其中AutoEncoder在MNIST数据集上的剩余块上构建。 mnist_transfer_cnn.py 转移学习玩具的例子。 neural_doodle.py 神经涂鸦。 neural_style_transfer.py 神经样式转移。 pretrained_word_embeddings.py 将预训练的词嵌入(GloVe embeddings)加载到冻结的Keras嵌入层中,并使用它在20个新闻组数据集上训练文本分类模型。 reuters_mlp.py 在路透社newswire主题分类任务上训练并评估一个简单的MLP。 stateful_lstm.py 演示如何使用有状态的RNN有效地建模长序列。 variational_autoencoder.py 演示如何构建变体自动编码器。 variational_autoencoder_deconv.py 演示如何使用反褶积层使用Keras构建变体自动编码器。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值