使用pycharm调试时需要传入数据集的路径

pycharm调试远程服务器端的代码时,如何解决需要传入数据集所在的路径作为参数

本人在从服务器中拉取开源代码的时候,怎么都跑不通,遇到的两个困扰我很久的问题,在此记录一下

(1)在github上拉取的是cv项目,将原始数据集放到文件夹中运行时一直显示数据格式错误。

原因:原来是要对原始的数据集做一下处理,这个数据的处理过程原代码是没有交代的。一直显示没有数据集Imagenet文件,将数据集下载下来,使用原始数据集数据集会报错。在cv领域,数据集通常处理的是将图片作为X输入,不用额外的图片标签文件,数据的标签作为文件夹的名称,属于该类的图片的文件都放在该文件夹下。原始的数据集验证集中只有数据图片,标签是以一个txt的文件存储的。
数据处理解决方案:从txt标签文件中读取每个图片的标签,然后将同一类的图片放到一个文件夹。python脚本代码如下:


```python
import os
import shutil



data_dir = 'ILSVRC2012_img_val/'
label_file = 'caffe_ilsvrc12/val.txt'
output_dir = 'imagenet/val/'

if not os.path.exists(output_dir):
    os.makedirs(output_dir)

with open(label_file,'r')as f:
    lines = f.readlines()
    labels= {}
    for line in lines:
        label_info = line.strip().split()
        labels[label_info[0]] = int(label_info[1])

for filename in os.listdir(data_dir):
    src_path = os.path.join(data_dir,filename)
    dst_folder = os.path.join(output_dir,str(labels[filename]))
    if not os.path.exists(dst_folder):
        os.makedirs(dst_folder)
    dst_path = os.path.join(dst_folder, filename)
    shutil.copyfile(src_path,dst_folder)

然后就成功的将图片分类好啦

(2)项目代码是通过在终端中输入数据集的路径参数来运行代码,我想再服务器中可以调试代码,看看代码的数据流向,在服务器终端中传入参数后只能一次运行,不能一步步调试看结果,怎么办呢?

项目代码中从控制台接收数据集的路径作为参数的基本做法


```python
parser = argparse.ArgumentParser(description='Conformalize Torchvision Model on Imagenet')
parser.add_argument('data', metavar='IMAGENETVALDIR', help='path to Imagenet Val')
args = parser.parse_args()

如果不想每次运行时都从控制台输入路径参数,可以将路径参数在代码中写死,其中data前面加了两个–表示这是一个可选参数,如果不指定的话,就用默认参数

parser.add_argument('--data', metavar='IMAGENETVALDIR', nargs='?', default='imagenet/val', help='path to Imagenet Val')

解决办法:正常的情况是在ssh终端中运行(激活当前虚拟环境,进入当前项目文件夹)example.py文件的命令是:

python example.py 'imagenet/val/'

如果路径参数已经像上面那样写死的话,就不用传入参数了,直接输入:

python example.py 

经过上面操作之后,项目就可以正常运行起来了,但是在ssh中只能让代码跑起来,是没法在服务端进行调试的。
接下来如何用pycharm进行在输入路径参数的情况下,调试项目呢?
我点击pycharm的运行按钮,发现代码一直报没有IMAGENETVALDIR值,同样写死的代码我在服务端就可以跑啊,为啥在pycharm中启动相同的程序就不行了呢?经过chatGpt的解释和自己的尝试发现需要在pycharm中的–运行–编辑配置–形参中要把数据集的路径加上,例如我是在服务端跑的:那么数据集的路径就是/home/lwj/SRAPS/imagenet/val,哈!,然后就可以在本地用pycharm去调试和看服务端的每一句代码结果啦!

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值