Colab跑项目

Colab文件目录路径显示

在这里插入图片描述
上级目录图片超像上传文件,每次进入到上级目录我都不知所措,想要返回到content文件夹下,却不知道该如何应对
傻了,既然此时是在content的上一级目录,那么content就在当前目录的子文件夹啊!!!!
我还试图 通过命令 厘清文件夹路径
在这里插入图片描述
要想展示的目录路径在content下我还真不知道怎么让他显示,不过能看,只不过没那么简洁,可以只看到content路径下的文件们

在这里插入图片描述
别乱动,动乱了再用 !mv xx yy 挽救吧
在这里插入图片描述
不能进到/content/下,别问我怎么知道的
感谢博主指导!

更改colab当前工作文件夹

在这里插入图片描述

colab目录为 /content/
/content/drive/ 云盘文件

老老实实待在content文件夹下面,不要去别的地方惹是生非还回不来啦
害得我步履维艰
在这里插入图片描述
参考博客,os.chdir(“drive/My Drive/…”) 这句没明白

Colab挂载谷歌云盘

import os
from google.colab import drive
drive.mount("/content/drive")

colab使用命令(从这开始看,前面no zuo no die)

1.首先得会一些命令行的使用(%一般为目录相关,!为执行相关)

!nvidia-smi         查看gpu配置
%cd 目录             切换目录
%pwd                当前路径
%dir %ls            当前路径下文件
!pip install 包      安装包
!python 文件          运行文件
cp -rf 源文件目录 目的文件目录    复制文件到想要的目录下
colab目录为 /content/
           /content/drive/   云盘文件
 

其实这些目录跟Linux命令差不多,无非加个!%(因为是在jupyter执行的)
2.如何对项目上传并执行

1.上传压缩包或文件夹到谷歌云盘
2.打开colab并挂载云盘
3.将文件复制到colab下,也就是从/content/drive/ 复制到/content/
  !mkdir test     当前目录为/content/,不是%cd 切换
   cp -rf /content/drive/MyDrive/text.zip /content/test
4.!unzip text.zip  切换到test目录下
  为什么要复制到/content/下:因为如果数据集过大,第一个epoch会从云盘一个个提取数据,主要是为什么第一个epoch为什么时间很久,如果文件在colab目录下,会提高读取数据的时间。
5.这时就差执行了,以我test文件为例
切换到解压后的文件夹中,执行文件为run.py 还需要指定参数--model TextRNN
!python run.py --model TextRNN

执行就行!差不多OK了
来源于此,还有一个问题colab使用为12个小时一天,如果执行超半个小时没动计算机colab会自动断开,如果我们程序还没执行完就很烦,如何解决???

最紧要,首先,修改笔记本设置使用启用gpu在这里插入图片描述

上传zip文件到 /content/文件夹下

不胡乱操作os.chdir(“…/”),直接默认上传的就在content文件夹下

!unzip /content/yolov5-5.0.zip -d /content/yolov5

如果文件顺利完整上传的化,就会顺利unzip解压
在这里插入图片描述

删除非空文件夹需要强制递归删除!rm -rf 文件夹路径

举个例子
强制递归删除命令:文件位置可以右键复制地址

!rm -rf /content/yolov5-7.0.zip

进入到yolov5-5.0目录下 %cd /content/yolov5/yolov5-5.0

在这里插入图片描述

安装环境 !pip install -r requirements.txt

在这里插入图片描述
在这里插入图片描述

添加插件 %load_ext

%load_ext tensorboard
再次启动 reload

启动tensorboard 中间不能有空格 先启动再加载,日志再runs/train中

打开tensorboard再运行train.py程序

%tensorboard --logdir=runs/train

在这里插入图片描述

!python train.py --rect

启动矩阵推理训练
在这里插入图片描述

刷新tensorboard

在这里插入图片描述
如果一开始 tensorboard不显示,是因为上传的zip文件里面runs文件夹下train文件夹下没有exp文件,没训练过,但是不影响,继续在下面通过!python train.py --rect运行就好
在这里插入图片描述
GPU就是快啊!!!
此次训练的日志保存再exp8
在这里插入图片描述
在这里插入图片描述
tensorboard里显示loss的变化
在这里插入图片描述
tensorboard数据:runs/train/exp/events.out.tfevents.1678366117.03e634abd4f1.7156.0

超参数:hyp.yaml

类别实例:labels.jpg 即每个类别出现的次数

训练结果:results.csv

更改训练的数据集

对整个coco数据集训练,修改data参数

!python train.py --data=data/coco.yaml

在这里插入图片描述

把得到的best.pt下载下来在本地的yolov5项目中,把detect.py 中main函数第一个参数weights对应的权重参数文件改成这个best.pt,就可以测试结果

把得到的best.pt下载下来在本地的yolov5项目中,把detect.py 中main函数第一个参数weights对应的权重参数文件改成这个best.pt,就可以测试结果

总结

运行train.py
下载的是yolov5-v5版本

1、把模型文件的压缩文件上传到colab
2、!unzip /content/yolov5-5.0.zip解压缩
3、%cd /content/yolov5-5.0转移到当前文件夹
4、!pip install -r requirements.txt安装所有需要的库
5、打开画学习曲线的tensorboard工具
所有的训练loss等结果都会记录在tuns/train的文件夹中

%reload_ext tensorboard
%tensorboard --logdir=runs/train

6、运行!python train.py --rect,再刷新tensorboard,就可以看到训练过程了
(服务器训练模型的速度是真滴快!)

原文链接(有些detect的可以一看):https://blog.csdn.net/weixin_45727991/article/details/127500046

上传zip文件不完整

在这里插入图片描述

unzip:  cannot find or open /content/yolov5-5.0.zip, /content/yolov5-5.0.zip.zip or /content/yolov5-5.0.zip.ZIP.

解决colab上传大文件速度慢

oneDrive之前好像被我关掉了
谷歌云端硬盘入口
c参考

https://zhuanlan.zhihu.com/p/604874981

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
要在Colab运行GitHub代码,首先需要克隆GitHub项目到Colab虚拟机的sample_data文件夹中。你可以找到你想要克隆的GitHub代码的HTTPS地址,比如AttnGAN的地址可以是https://github.com/davidstap/AttnGAN.git。然后在Colab运行以下命令来克隆代码: ``` !git clone https://github.com/davidstap/AttnGAN.git ``` 接下来,你可以打开Colab并连接到云端虚拟机,配置实验所需的资源,比如代码和数据集。你可以在Colab运行你克隆的代码,并查看运行结果。请注意,使用Colab时有一些注意事项需要注意。 如果你想在Colab中使用OpenCV来处理图像,你可以导入必要的库并加载图像。例如,在opencv/opencv_demo.py文件中,你可以导入numpy、matplotlib.pyplot和cv2库,并使用cv2.imread函数加载图像。然后,你可以使用plt.imshow函数显示图像。以下是一个示例代码: ```python import numpy as np import matplotlib.pyplot as plt import cv2 svs_img = cv2.imread('/content/drive/MyDrive/Colab Notebooks/Deep_learning_in_WSI/tricks_in_processing_and_training/16558.png') plt.rcParams['figure.figsize'] = 10, 10 plt.imshow(svs_img) ``` 这将加载图像并显示在Colab中。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* [利用谷歌colabgithub代码AttnGAN详细步骤 深度学习实验(colab+pytorch+jupyter+github+AttnGAN)](https://blog.csdn.net/air__Heaven/article/details/122660676)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *3* [使用Colab运行github中的项目](https://blog.csdn.net/LiuLongLeg/article/details/118150983)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值