深度学习
文章平均质量分 80
learning112358
这个作者很懒,什么都没留下…
展开
-
【VLP(Visual-Linguistic Pretraining)模型相关基本知识】
关于输入嵌入(Input Embedding),图像编码器(Image Encoder),文本编码器(Text Encoder),Transformer编码器(Transformer Encoder),跨模态注意力(Cross-Modal Attention),解码器(Decoder),视觉推理(Visual Reasoning),双向交互模块(Bi-Directional Interaction Module)跨模态注意力层用于图像和文本之间的交互,即图像特征与文本特征之间的关系。原创 2024-04-23 18:06:17 · 749 阅读 · 2 评论 -
深度学习中模块设计汇总(一)
2.1离散小波逆变换 Inverse discrete wavelet transform (IDWT)全局上下文 res-dense 模块包含一个残差密集块 (RDB) 和一个全局上下文块 (GCB)DWT 的本质是将输入特征图分解为高频和低频分量,离散小波变换(DWT)上采样和下采样。1.全局上下文 res-dense 模块。1.2 全局上下文块 (GCB)1.1 残差密集块 (RDB)2.离散小波变换(DWT)............原创 2022-08-25 18:09:30 · 2665 阅读 · 0 评论 -
工作中pytorch常用函数汇总
**工作中pytorch常用函数汇总**声明:该文章的内容来自于网络的归纳总结,不断更新中,欢迎收藏,点赞评论,以及提供更多工作常用的函数。1.torch.backends.cudnn.benchmark一般将torch.backends.cudnn.benchmark设为True就可以大大提升卷积神经网络的运行速度。原因:将会让程序在开始时花费一点额外时间,为整个网络的每个卷积层搜索最适合它的卷积实现算法,进而实现网络的加速。这行代码要加在哪里其实一般加在开头就好,比如在设置使用 GPU 的原创 2021-09-02 12:15:44 · 699 阅读 · 0 评论 -
tensorflow中的问题终结
tensorflow中的问题终结 问题1: File “D:/yinda/Python_machine_learning/detect-cell-edge-use-unet-master/unet.py”, line 46, in get_unet merge6 = merge([drop4, up6], mode=’concat’, concat_axis=3) TypeErr...原创 2018-09-01 19:15:47 · 717 阅读 · 2 评论 -
python学习中的语法等
python学习手册(1)isinstance Isinstance的用法是用来判断一个量是否是相应的类型,接受的参数一个是对象加一种类型。示范代码如下: a = 1 print(isinstance(a,int)) print(isinstance(a,float)) 结果: True False (2)range (...原创 2018-09-16 15:34:47 · 159 阅读 · 0 评论 -
神经网络参数优化总结
神经网络参数优化总结1一般而言,对神经 网络的调节包括:学习速率、Momentum(动量梯度下降法)的参数beta,Adam优化算法的参数,beta1,beta2,神经网络层数,不同层中隐藏单元数量,学习率衰减等**1、**对于学习率(1)gird search:网格搜索,对于要调整的超参数(2) random search :是随机搜索超参数**2、**调整的参数为mini-batch...原创 2018-11-24 13:23:24 · 4042 阅读 · 0 评论