在colab上运行GitHub项目

在colab上运行GitHub项目

最近在学习一个宝藏仓库:649453932/Bert-Chinese-Text-Classification-Pytorch: 使用Bert,ERNIE,进行中文文本分类 (github.com)

发现跑bert模型时,笔记本显存不够跑不出来了,故寻找了下资料,将模型转移到colab上跑,现将这个经历记录下来,方便自己以后再上传demo至colab上

前提需要

科学上网、拥有谷歌邮箱、谷歌云端硬盘、colab注册

一、若demo已经下载到本地,则可以将文件夹整体传至云端硬盘

二、创建ipynb,let‘s go!!

查看显卡型号
!nvidia-smi

有点背,开了pro会员,还是背分到了T4,/(ㄒoㄒ)/~~

挂载谷歌云端硬盘
from google.colab import drive
drive.mount('/content/drive')

进入相应目标目录下

按照相应的包

按照demo所需要的库,库版本信息一般要求在requirements.txt内

!pip install -r requirements.txt

我们上面这个项目没有requirements.txt这个文件,需要的库较少吧,毕竟也不是论文那种整个的代码库,零碎的就自己使用下面这个命令好了

!pip install 包名

这个demo只需要下载一个额外的库,还是很方便…

正式运行

运行我们这个项目,注意,我们当前是在仓库(Bert-Chinese-Text-Classification-Pytorch)的这个目录下,故可以直接使用如下命令,不然记得给文件(run.py)加上前缀,例如:/content/drive/MyDrive/Colab Notebooks/Bert-Chinese-Text-Classification-Pytorch/run.py

!python run.py --model bert

模型开始训练了,BERT模型太大,这个预计得跑一个消失/(ㄒoㄒ)/~~

参考资料:

(304条消息) 使用Colab运行github中的项目_Lil mercy.的博客-CSDN博客_colab运行github项目

[649453932/Bert-Chinese-Text-Classification-Pytorch: 使用Bert,ERNIE,进行中文文本分类 (github.com)](

  • 4
    点赞
  • 40
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
要在Colab运行GitHub代码,首先需要克隆GitHub项目到Colab虚拟机的sample_data文件夹中。你可以找到你想要克隆的GitHub代码的HTTPS地址,比如AttnGAN的地址可以是https://github.com/davidstap/AttnGAN.git。然后在Colab运行以下命令来克隆代码: ``` !git clone https://github.com/davidstap/AttnGAN.git ``` 接下来,你可以打开Colab并连接到云端虚拟机,配置实验所需的资源,比如代码和数据集。你可以在Colab运行你克隆的代码,并查看运行结果。请注意,使用Colab时有一些注意事项需要注意。 如果你想在Colab中使用OpenCV来处理图像,你可以导入必要的库并加载图像。例如,在opencv/opencv_demo.py文件中,你可以导入numpy、matplotlib.pyplot和cv2库,并使用cv2.imread函数加载图像。然后,你可以使用plt.imshow函数显示图像。以下是一个示例代码: ```python import numpy as np import matplotlib.pyplot as plt import cv2 svs_img = cv2.imread('/content/drive/MyDrive/Colab Notebooks/Deep_learning_in_WSI/tricks_in_processing_and_training/16558.png') plt.rcParams['figure.figsize'] = 10, 10 plt.imshow(svs_img) ``` 这将加载图像并显示在Colab中。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* [利用谷歌colabgithub代码AttnGAN详细步骤 深度学习实验(colab+pytorch+jupyter+github+AttnGAN)](https://blog.csdn.net/air__Heaven/article/details/122660676)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *3* [使用Colab运行github中的项目](https://blog.csdn.net/LiuLongLeg/article/details/118150983)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值