![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
深度学习
文章平均质量分 80
sage_wang
爱技术,爱音乐,爱运动
展开
-
【分布式训练】单机多卡(一):理论基础
最近由于有模型训练的任务,老板对已有的单机单卡模型训练的时间不满意,觉得炼丹周期太长,让我用单机多卡来对模型训练进行优化加速。这两天看了点知乎、csdn、stackoverflow上面相关的文章和问题,发现里面的坑还不少。今天,我就给大家排排坑,介绍一下如何将已有的模型训练转成单机多卡的形式,来进行分布式训练。1、总分分布式训练分为这几类:l按照并行方式来分:模型并行 vs 数据并行l按照更新方式来分:同步更新 vs 异步更新l按照分布式训练系统架构来分:Parameter Server Arc原创 2021-07-13 21:20:47 · 747 阅读 · 2 评论 -
Python入门,看这篇就够了!!!
“人生苦短,我用python”你想从事互联网开发?你想学深度学习?你想学大数据、数据挖掘?你想做网站?……学python就对了!现在只要涉及到互联网工作,很多研究开发都离不开python学习,如何快速入门Python呢?你需要,一台笔记本,一根可以连接互联网的网线,就可以开始你的Python自学之旅。第一部分、Python编程基础基本数据类型(数值、字符串、列表、元组、集合、字典)内置函数(逻辑判断、类型转换、数值运算等)函数创建与使用(函数定义、函数参数、匿名函数等)类和面向对原创 2021-05-23 11:53:00 · 145 阅读 · 1 评论 -
Python3.6 读写HDF5
# -*- coding: utf-8 -*-import h5pyimport numpy as npf = h5py.File('xx.h5','r')for key in f.keys(): print(f[key].name) print(f[key].shape) print(f[key].value)print(f.keys())#other ways#读HDF 5import h5pyfilename = 'file.hdf5'f = h5原创 2020-09-09 18:39:40 · 5351 阅读 · 0 评论 -
深度学习之路:(一)Keras中mnist数据集测试
Keras环境搭建 本地环境 MacOS一、安装Anaconda1、下载Anaconda最新版本:官网下载地址附:清华镜像源 2、下载后直接安装,点击next3、检测版本打开终端输入conda --v,如显示如下,则安装成功。shiqingdeMacBook-Air:~ shiqingwang$ conda --vconda 4.4...原创 2018-02-11 15:36:38 · 16530 阅读 · 2 评论 -
Crnn_chinese_characters 中文字符识别
Crnn_chinese_characters 中文字符识别重要的源码地址:Warp-ctcCrnn_chinese_characters_rec文字识别(OCR)CRNN(基于pytorch、python3) 实现不定长中文字符识别一、实验环境没网、没权限、centos 64二、实验步骤1、离线安装 anacondaanaconda清华镜像源先下载anaconda3-4....原创 2019-01-15 19:21:31 · 13523 阅读 · 1 评论 -
Faster-RCNN系列(一) 制作自己的数据集Pascal_VOC格式
使用的是Faster-RCNN-TF一、数据集准备我们在做目标识别时,大家都知道要有训练集、验证集以及测试集,当然数据集格式也有很多种,我们这里使用的是pascal_voc数据格式。如下图是voc2007数据集文件夹格式JPEGImages:用来保存你的数据图片,当然,对于faster-rcnn来讲,所有的图片必须是jpg/jpeg格式,其他格式的话要转换一下。另外,一定要对图片进行编...原创 2019-02-18 13:20:56 · 7884 阅读 · 0 评论