paddle、pytorch学习笔记

paddle、pytorch学习笔记

安装conda

安装教程详见
https://blog.csdn.net/in546/article/details/117400839

安装Pycharm

安装教程详见
https://blog.csdn.net/Turniper/article/details/121865631

安装pytorch

安装教程详见
https://blog.csdn.net/MCYZSF/article/details/116525159

安装paddlepaddle

安装教程详见
https://www.paddlepaddle.org.cn/documentation/docs/zh/install/index_cn.html

常用指令

pip list
pip3 install --upgrade numpy
pip3 install xxx -i https://pypi.tuna.tsinghua.edu.cn/simple（使用清华镜像源）

#训练模型
python -u tools/train.py -o num_classes=n -o save_dir=model -c configs/xxx.yml --use_vdl=True --eval
#断点训练
python -u tools/train.py -c configs/xxx.yml -o save_dir=model -r model/xxx --use_vdl=True --eval
#评估模型
python -u tools/eval.py -c configs/xxx.yml -o weights=model/xxx/best_model
#模型转换
python -u tools/export_model.py -c configs/xxx.yml --output_dir=output/ -o weights=model/xxx/best_model
#模型推理
python -u deploy/python/infer.py --model_dir=output/xxx/ --image_file=images/xxx.jpg
#通过visualdl命令实时查看变化曲线
#设置visualdl参数
python tools/train.py -c configs/yolov3_mobilenet_v1_roadsign.yml --eval --use_vdl=True --vdl_log_dir=vdl_dir/scalar
#打开visualdl
visualdl --logdir vdl_dir/scalar/ --host <host_IP> --port <port_num>

conda activate xxx
conda deactivate xxx
conda create --name xxx python=xxx
conda remove --name xxx --all
conda info -e

C:\Windows\System32>nvidia-smi.exe（不同电脑文件路径存在差异）
taskkill -PID xxx
taskkill /F -PID xxx（强制终止）

paddle cuda out of memory gpu 调小batch_size

解决pycharm中: OSError: [WinError 1455] 页面文件太小，无法完成操作 的问题
https://www.cnblogs.com/20183544-wangzhengshuai/p/14814459.html

Jupyter 快捷键总结

Jupyter Notebook 有两种键盘输入模式。
编辑模式，允许你往单元中键入代码或文本；这时的单元框线是绿色的。
命令模式，键盘输入运行程序命令；这时的单元框线是灰色。

命令模式 (按键 Esc 开启)快捷键：
Enter : 转入编辑模式
Shift-Enter : 运行本单元，选中下个单元
Ctrl-Enter : 运行本单元
Alt-Enter : 运行本单元，在其下插入新单元
Y : 单元转入代码状态
M :单元转入markdown状态
R : 单元转入raw状态
设定 1 级标题
设定 2 级标题
设定 3 级标题
设定 4 级标题
设定 5 级标题
设定 6 级标题
Up : 选中上方单元
K : 选中上方单元
Down : 选中下方单元
J : 选中下方单元
Shift-K : 扩大选中上方单元
Shift-J : 扩大选中下方单元
A : 在上方插入新单元
B : 在下方插入新单元
X : 剪切选中的单元
C : 复制选中的单元
Shift-V : 粘贴到上方单元
V : 粘贴到下方单元
Z : 恢复删除的最后一个单元
D,D : 删除选中的单元
Shift-M : 合并选中的单元
Ctrl-S : 文件存盘
S : 文件存盘
L : 转换行号
O : 转换输出
Shift-O : 转换输出滚动
Esc : 关闭页面
Q : 关闭页面
H : 显示快捷键帮助
I,I : 中断Notebook内核
0,0 : 重启Notebook内核
Shift : 忽略
Shift-Space : 向上滚动
Space : 向下滚动

编辑模式 ( Enter 键启动)下快捷键
Tab : 代码补全或缩进
Shift-Tab : 提示
Ctrl-] : 缩进
Ctrl-[ : 解除缩进
Ctrl-A : 全选
Ctrl-Z : 复原
Ctrl-Shift-Z : 再做
Ctrl-Y : 再做
Ctrl-Home : 跳到单元开头
Ctrl-Up : 跳到单元开头
Ctrl-End : 跳到单元末尾
Ctrl-Down : 跳到单元末尾
Ctrl-Left : 跳到左边一个字首
Ctrl-Right : 跳到右边一个字首
Ctrl-Backspace : 删除前面一个字
Ctrl-Delete : 删除后面一个字
Esc : 进入命令模式
Ctrl-M : 进入命令模式
Shift-Enter : 运行本单元，选中下一单元
Ctrl-Enter : 运行本单元
Alt-Enter : 运行本单元，在下面插入一单元
Ctrl-Shift-- : 分割单元
Ctrl-Shift-Subtract : 分割单元
Ctrl-S : 文件存盘
Shift : 忽略
Up : 光标上移或转入上一单元
Down :光标下移或转入下一单元

动手学机器学习(李沐老师)

https://space.bilibili.com/1567748478
http://zh-v2.d2l.ai/index.html

yolov3(pytorch)教程

https://www.bilibili.com/video/BV1Hp4y1y788?spm_id_from=333.337.0.0
一、数据集的准备(VOC)
1.xml文件放在Annotations文件夹下
2.JPG文件放在JPEGImages文件夹下
二、数据集的处理
voc_annotations.py
修改annotation_mode、classes_path
三、开始网络训练
1.train.py
修改classes_path
2.断点训练
train.py
需要修改model_path、Init_Epoch、Epoch次数 UnFreeze_Epoch
四、训练结果预测
yolo.py
修改model_path(文件在logs文件夹下)、classes_path
predict.py
输入图片路径进行检测

paddlepaddle教程

https://www.paddlepaddle.org.cn/documentation/docs/zh/guides/index_cn.html
https://www.bilibili.com/video/BV1zJ411579R?p=1
https://gitee.com/paddlepaddle/PaddleDetection/blob/master/docs/tutorials/DetectionPipeline.md#%E5%BC%80%E5%A7%8B%E8%AE%AD%E7%BB%83
注意修改config文件对应的路径以及其他相关信息

不断更新中…