【学习笔记】自己动手制作数据集,以及第一个卷积神经网络(CNN)

这篇博客记录了从制作猫狗分类数据集到构建基本卷积神经网络(CNN)的过程。作者选择了独热码作为标签,并讨论了不同标签表示方式对损失函数的影响。训练结果显示网络在训练集上达到99.3%的准确率,但在验证集上降至63%,揭示了过拟合问题。文章以探讨解决过拟合的方法作为后续主题。
摘要由CSDN通过智能技术生成

数据集地址,这份数据集是猫的图片和狗的图片,是谷歌摘取了一部分Kaggle的猫狗分类图片集。这次我们并没有给出制作好的数据集,而是只有放在两个不同文件夹内的猫和狗的图片。

我们第一步先用PIL把图片格式统一一下,我们这里将像素改为(150*150)。

import os
from PIL import Image

base_dir = './dataset/cats_and_dogs_filtered'
train_dir = os.path.join(base_dir, 'train')
validation_dir = os.path.join(base_dir, 'validation')
train_cats_dir = os.path.join(train_dir, 'cats/')
train_dogs_dir = os.path.join(train_dir, 'dogs/')
validation_cats_dir = os.path.join(validation_dir, 'cats/')
validation_dogs_dir = os.path.join(validation_dir, 'dogs/')
train_cat_fnames = os.listdir(train_cats_dir)
train_dog_fnames = os.listdir(train_dogs_dir)
validation_cat_fnames = os.listdir(validation_cats_dir)
validation_dog_fnames = os.listdir(validation_dogs_dir)
os.mkdir(train_dir + '/resize_cats')
os.mkdir(train_dir + '/resize_dogs')
os.mkdir(validation_dir + '/resize_cats')
os.mkdir(validation_dir + '/resize_dogs')
for i in train_cat_fnames:
    original_img = Image.open(train_cats_dir+i)
    clipping_img = original_img.resize((150, 150), Image.ANTIALIAS)
    clipping_img.save(train_dir+'/resize_cats/'+i)

for i in train_dog_fnames:
    original_img = Image.open(train_dogs_dir + i)
    clipping_img = original_img.resize((150, 150), Image.ANTIALIAS)
    clipping_img.save(train_dir + '/resize_dogs/' + i)

for i in validation_cat_fnames:
    original_img = Image.open(validation_cats_dir + i)
    clipping_img = original_img.resize((150, 150), Image.ANTIALIAS)
    clipping_img.save(validation_dir + '/resize_cats/' + i)

for i in validation_dog_fnames:
    original_img = Image.open(validation_dogs_dir + i)
    clipping_img = original_img.resize((150, 150), Image.ANTIALIAS)
    clipping_img.save(validation_dir + '/resize_dogs/' + i)

下一步我们将猫狗图片制作成tfrecords格式的文件。

import os
import tensorflow as tf
from PIL import Image


cwd = './dataset/cats_and_dogs_filtered/train/'
classes = ('
评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值