pytorch实现数据数据读取

最新推荐文章于 2023-11-08 20:52:47 发布
最新推荐文章于 2023-11-08 20:52:47 发布
阅读量1.8k 收藏 7
点赞数
分类专栏： 深度学习 机器学习 文章标签： pytotch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Icesuns/article/details/88900365
版权
本文介绍了如何在PyTorch中使用Dataset和DataLoader处理数据。Dataset作为抽象类用于数据抽象，需重写`__getitem__`和`__len__`方法。DataLoader提供批量数据操作及shuffle功能。通过实例展示了处理姓名性别预测数据的过程。
摘要由CSDN通过智能技术生成

文章目录


本文原地址为 www.zicesun.com icesuns.github.io

在学习的过程中,遇到很多的问题.在训练模型的时候,需要对数据进行读取操作.本篇文章,介绍pytorch如何自定义数据dataset和dataloader.在pytorch中,提供了Dataset这个类,负责对数据进行抽象,一次调用只返回第一个同样本.而Dataloader提供了对一个对一个batch的数据操作,还有对数据进行shuffle等功能.

Dataset

Dataset是一个抽象类,表示一个数据集.所有的数据集类都是Dataset的子类.在自定义数据集的时候,需要对函数**__getitem()**, **__len()**重写.

class Dataset(object):
    """An abstract class representing a Dataset.

    All other datasets should subclass it. All subclasses should override
    ``__len__``, that provides the size of the dataset, and ``__getitem__``,
    supporting integer indexing in range from 0 to len(self) exclusive.
    """
    #每调用一次,返回一个数据样本, index表示返回样本的索引位置
    #在数据处理中，有时会出现某个样本无法读取等问题，比如某张图片损坏。这时在__getitem__函数中将出现异常，此时最好的解决方案即是将出错的样本剔除。然后在数据集中,随机加入一条数据
    def __getitem__(self, index):
        raise NotImplementedError
    #__len__ 数据集的长度
    def __len__(self):
        raise NotImplementedError
    #增加数据,对数据集进行拼接
    def __add__(self, other):
        return ConcatDataset(
最低0.47元/天 解锁文章
Icesuns
关注
专栏目录
Linux中编写Shell脚本
谢公子的博客
10-08 16万+
目录 Shell Shell脚本的执行 Shell脚本编写规范 Shell 中的变量 变量的算术运算 双小括号 (()) 数值运算命令的用法 let 运算命令的用法 expr 命令的用法 br 命令的用法 $[]符号的运算示例 Shell脚本的条件测试 几种条件测试语句 文件测试操作符 字符串测试操作符 整数二元比较操作符 逻辑操作符 测试表达式 test 、...
linux shell 脚本 入门到实战详解[⭐建议收藏！！⭐]
热门推荐
心有鸿鹄天地，不敢妄坠人间
09-28 28万+
文章目录shell 入门到实战详解[⭐建议收藏！！⭐]关于作者**作者介绍**一、shell 入门简介1.1 什么是shell1.2 shell 编程注意事项1.3 第一个shell 脚本 hello world二、shell 环境变量讲解2.1 shell 变量详解2.2 shell 系统变量 介绍2.3 shell 环境变量 介绍2.3.1 常见的系统环境变量2.4 shell 用户环境变量 介绍2.4.1 自定义shell环境变量2.4.2 echo 打印菜单栏2.4.3 shell 中彩色输出 h
shell 石头剪刀布
爱死亡机器人
05-03 1521
##三个数值由小到大： #!/bin/bash echo -n "Enter three number:" read a b c if [ $a -gt $b ];then t=$a;a=$b;b=$t; fi if [ $a -gt $c ];then t=$a;a=$c;c=$t; fi if [ $b -gt $c ];then t=$b;b=$c;c=$t; fi echo "From ...
Shell编程之石头剪刀布游戏
m0_47219942的博客
07-20 822
Shell脚本之石头剪刀布游戏脚本一脚本二 脚本一 [root@localhost opt]# vim caiquan.sh #!bin/bash read -p "请输入0石头、1剪刀、2步：" num cp=`expr $RANDOM % 3` if [ "$num" = "$cp" ];then echo "平局" else if [ `expr $num + 1` = "$cp" ] || [ `expr $num + 2` = "
石头剪刀布脚本
Stephencurr的博客
10-26 300
源代码： #!/bin/bash game=(石头 剪刀 布) num=[RANDOMa=[RANDOM%3+1] a=[RANDOMa={game$[num]} echo “1 石头” echo “2 剪刀” echo “3 布” read -p ‘请输入1-3：’ num1 if [ $num1 -eq num];thenechoecho"平局"echo"机器人出的也是"num ];then echo echo "平局" echo "机器人出的也是"nu
shell编程100例之石头、剪刀、布游戏
分享学习心得，生命不息，学习不止，望共勉。
07-03 1625
shell编程100例之石头、剪刀、布游戏
shell脚本石头剪刀布游戏
最新发布
weixin_53968165的博客
11-08 626
num1 == $[$num2-1] # 数值二比数值一大的时候是平局 平局。$num1 == $num2 || $num1 == $[$num2-3] # 两个数值相等的时候 电脑赢。机器人 石头 剪刀 布。本人 石头 剪刀 布。
shell脚本的人机石头剪刀布游戏
weixin_41176080的博客
09-17 1345
#!/bin/bash game=(石头 剪刀 布) num=$[RANDOM%3] computer=${game[$num]} #通过随机数获取计算机的出拳 #出拳的可能性保存在一个数组中，game[0],game[1],game[2]分别是三个中不同的可能 echo "请根据下列提示选择您的出拳手势" echo "1.石头" echo "2.剪刀" echo "3.布" ...
Shell脚本之剪刀石头布人机对战2
weixin_39608791的博客
07-16 2230
文章目录剪刀石头布，人机对战一、实验步骤1、新建文件text3.sh2、测试 剪刀石头布，人机对战 一、实验步骤 1、新建文件text3.sh 文件内容如下所示： #!/bin/bash read -p "0:代表剪刀；1：代表石头；2：代表布；请输入剪刀石头布（0-2）" num jnum=`expr $RANDOM % 3` num1=`expr $num + 1` num2=`expr $num + 2` jnum1=`expr $jnum + 1` jnum2=`expr $jnum + 2` if
shell小游戏（石头剪刀布）
weixin_48052876的博客
06-10 987
问题描述： 提示：这里描述项目中遇到的问题： 例如：数据传输过程中数据不时出现丢失的情况，偶尔会丢失一部分数据 APP 中接收数据代码： @Override public void run() { bytes = mmInStream.read(buffer); mHandler.obtainMessage(READ_DATA, bytes, -1, buffer).sendToTarget(); } 原因分析： 提示：这里填写问题的分析： 例如：Handler 发送消息有两种方式，分别是 ..
shell脚本编写简单入门
想吃凤梨酥的博客
07-10 3935
使用编辑器 创建并添加语句 是指此脚本使用/bin/bash来解释执行。
实现人机石头，剪刀，布游戏
weixin_44799645的博客
03-30 1001
编写脚本，实现人机<石头，剪刀，布>游戏 #!/bin/bash game=(石头 剪刀 布) num=$[RANDOM%3] computer=${game[$num]} #通过随机数获取计算机的出拳 #出拳的可能性保存在一个数组中，game[0],game[1],game[2]分别是 3 中不同的可能 echo "请根据下列提示选择您的出拳手势" echo "1.石头" echo ...
石头剪刀布
未来的路
12-01 296
题目要求：编写脚本，实现人机石头剪刀布游戏 #!/usr/bin/bash declare -A array_key array_key=(["rock"]=0 ["paper"]=1 ["scissors"]=2) array_=(rock paper scissors) key=1 stty erase '^H' while [ $key -eq 1 ] do let system_key_index=$RANDOM%3 echo -e -n "\e[34mPlease
shell脚本之石头剪刀布小试牛刀
m0_46476544的博客
07-17 581
文章目录shell脚本之石头剪刀布小试牛刀实现人机对战脚本测试 shell脚本之石头剪刀布小试牛刀 实现人机对战 0代表石头 1代表剪刀 2代表布 脚本 #!/bin/bash read -p "请输入[0-2],0石头，1剪刀，2布:" num pc=`expr $RANDOM % 3` if [ "$num" = "$pc" ]; then echo "平局" else case $pc in 0) if [ $num = 2 ];then e
Shell脚本小游戏：石头剪刀布
m0_51160032的博客
10-20 4590
脚本代码： #!/bin/bash echo "接下来的是石头剪刀布的游戏" echo "定义1：包子；2：剪刀；3：布" echo "------------------------------" NUM=`echo $[RANDOM%3+1]` #1=包子 #2=剪刀 #3=布 read -p "请输入1-3：" key case $key in [1]) if [ $NUM -eq 1 ] then echo "你们打成平局" elif [ $NUM -eq 2 ] then .
shell编程小游戏：石头剪刀布
m0_55943711的博客
05-12 1129
【代码】shell编程小游戏：石头剪刀布。
Shell脚本——石头剪刀布小游戏
u014042047的博客
07-25 1553
Shell脚本——石头剪刀布小游戏 思路：利用变量RANDOM，对其进行取余后生成一定范围（0-2）的随机数，与玩家输入的数进行大小比较，穷举出所有玩家与电脑获胜的可能情况，使用if语句进行条件判断得出玩家与电脑的胜负。 #!/bin/bash # clear ## 清屏 echo "请选择：" echo "0.石头" echo "1.剪刀" echo "2.布" echo "======================" ## 分隔每一局游戏 while true;do
使用shell脚本实现石头剪刀布对战小游戏
qq_36588424的博客
07-19 1202
#!/bin/bash #功能描述:石头剪刀布游戏。 #计算机根据生成的随机数出拳，并提示用户出拳。 #将用户的输入与计算机产生的随机数进行比较，判断输赢。 # 1.石头；2.剪刀；3.布 computer=$[$RANDOM%3+1] clear echo "###################" echo "# 石头剪刀布游戏 #" echo -e "#\033[32m 请根据下列提示出拳: \033[0m#" echo "###################" echo "|--
shell脚本编写石头剪刀布
09-12
可以编写一个简单的shell脚本来实现石头剪刀布游戏。以下是一个示例脚本： ```shell #!/bin/bash # 定义石头剪刀布的选项 options=("石头" "剪刀" "布") # 生成AI的随机选择 AI_choice=${options[$RANDOM % ${#options[@]}]} # 用户选择 echo "请选择：1. 石头 2. 剪刀 3. 布" read -p "请输入选项的编号: " user_choice # 根据用户选择进行判断 case $user_choice in 1) user_choice="石头" ;; 2) user_choice="剪刀" ;; 3) user_choice="布" ;; *) echo "无效的选项" exit 1 ;; esac echo "你选择了: $user_choice" echo "AI选择了: $AI_choice" # 判断胜负 if [ "$user_choice" == "$AI_choice" ]; then echo "平局!" elif [ "$user_choice" == "石头" ] && [ "$AI_choice" == "剪刀" ] || [ "$user_choice" == "剪刀" ] && [ "$AI_choice" == "布" ] || [ "$user_choice" == "布" ] && [ "$AI_choice" == "石头" ]; then echo "你赢了!" else echo "你输了!" fi ``` 你可以将上述代码保存到一个名为`rps.sh`的文件中，然后在终端中运行该脚本。脚本会要求你输入选项的编号，然后展示你的选择和AI的选择，并给出胜负结果。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值