- 博客(16)
- 资源 (11)
- 收藏
- 关注
原创 为什么批次的数量会影响训练结果?
那这个就导致权重更平整化。同时也不是逐个样本更新梯度,而是对整个批次的样本同时进行计算,然后一次性更新梯度。那一个人一个的讨论,每次就是倾向他自己的最优方案,权重是想他自己靠近。开始我认为训练集中的的所有数据都会训练,那分不分批次无关紧要,一个批次多少训练集也无关。而如果一次100个人,那讨论的结果就是最大可能的倾向这100个人整体,而不是某一个人。而100人的意见可能就比较平稳,导致波动小,导致更平稳的训练过程和更快的收敛。一个人的意见有时候可能会比较偏激,导致方案变化大(权重变化大),波动比较大?
2024-04-14 16:50:49 164 1
原创 为什么一次取较少的样本个数,损失函数会不光滑
如果白话一点,就是,本来是4个人应该一起对某一个文件进行讨论,并达成共识(损失函数最低)。现在你先让2个人对文件讨论,并修改了文件内容(权重),那这两个人肯定对修改的文件满意(损失函数变低)。但是另外2个人开始没参与,现在一来,就看到文件已经被改了,那当然可能会出现不满意的情况(损失函数变高),你们2个凭啥啊?那后面2个人就是不同意的前面的修改内容,这样是不是分歧反而大了(损失函数值增加了)。想了一下,就是这个意思,本来我有4个样本,现在你用2个样本对权重进行了更新,很明显这2个样本肯定是损失函数减少了。
2024-04-04 21:46:42 331 1
原创 白话神经网络权重的生成
如果我期望的结果是100,你给我跑出来1000,那咋行啊,要改权重不是。我就找一个权重,把他稍稍改一下,比如增加0.01,再运行,结果不得了了,跑出来的结果是2000了,那我还敢增加权重,肯定不行了撒,必须反向操作,把权重减去0.01,哟不错,结果变成了500,离我们的结果100是不是近了嘛。然后我对每个权重都这样小心翼翼的去试一试,肯定有些会增加,有些会减少嘛,慢慢试,那结果不就是越来越接近100,当然慢慢试,要花时间,那如果结果差不多了,到100.00001,哎呦,可以了,就用这个权重吧。
2024-04-03 11:40:09 227 1
原创 构建pytorch的GPU运行环境
我下载的cnDNN的9点几的,直接安装,所以没有后面要复制lib的过程,其他的版本可以参考以下。先安装显卡驱动,要安装最新的显卡驱动,才支撑最新的cuda。注意,pytorch分GPU和CPU的,所以要安装GPU的。去annconda配置的环境里面安装,也可以直接安装。查看cuda的支持版本。安装cuda,这里下载。
2024-04-03 09:46:01 339 2
原创 修改jupyter的默认目录
方法很多,主要就是修改jupyter_notebook_config.py文件,并将c.NotebookApp.notebook_dir 进行赋值但是!!!要注意,快捷方式,需要把userprofile删除,重启,应该就可以了
2020-10-15 13:03:18 147
原创 安装Anaconda及nltk
折腾了一天,记录一下首先,是看视屏学习文本挖掘,按照视屏下载Anaconda3-5.2.0-Windows-x86_64链接:官方地址:https://repo.anaconda.com/archive/清华大学镜像:https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/开始下载成Anaconda2的版本,气死了安装nstl,用命令,不行import nltknltk.download()搜索方法https:/.
2020-10-14 23:05:44 738
原创 又过了一年多了
离上一篇博客,1年多了。感叹一下,时间真的很快。目前到了教学院系,以为事情少了,结果事情更多了第一届学生就要毕业了,感叹颇多,对第一届学生付出的确比较多,希望学生们学有所成指导学生毕业设计,目前整理相关资料,很杂java教了两届了数据挖掘也教了但是自己没深入,目前在看SSM框架,也准备深入学习文本挖掘还是要把科研弄上去,在什么地方就得吃什么饭,想改变规则就得先做规则的制...
2019-06-05 23:55:05 172
原创 十年,又回到原点,也许是个新的起点
十年,毕业十年了。回想一下,十年干了什么:计算机专业,硕士,从最初毕业前想到公司挣钱,结果随老婆到了一个中西部十八线城市的二本高校,毫无背景,结果没有进教学部门,而是到了教辅部门。结了婚,与老婆工作在同一个学校生了一个儿子,但有一个很大的意外,终于熬过来了!目前5岁半了,还算好,会100内的加减法,背十多首诗,认七八十个字,性格外向,非常活跃,情商、智商应该不差,意外之后松了一
2017-11-13 20:48:57 990
原创 学习C++primer心得08.7.1
对引用类型做 sizeof 操作将返回存放此引用类型对象所需的内在空间大小。对指针做 sizeof 操作将返回存放指针所需的内在大小;注意,如果要获取该指针所指向对象的大小,则必须对指针进行引用。delete pi;如果指针指向不是用 new 分配的内存地址,则在该指针上使用 delete 是不合法的。C++ 保证:删除 0 值的指针是安全的。对同一个内存空间使用两次 de
2008-07-01 23:42:00 378
原创 学习C++primer心得08.6.26
4.3.1. 创建动态数组int *pia = new int[10];用 new 动态创建长度为 0 的数组时,new 返回有效的非零指针。该指针与 new 返回的其他指针不同,不能进行解引用操作,因为它毕竟没有指向任何元素。而允许的操作包括:比较运算,因此该指针能在循环中使用;在该指针上加(减)0;或者减去本身,得 0 值。delete [] pia;在关键字 delete 和
2008-06-26 22:03:00 334
原创 学习C++primer心得08.6.25
08.6.184.1第四章 数组和指针int staff_size = 27;double salaries[staff_size]; // error: non const variable在函数体外定义的内置数组,其元素均初始化为 0。在函数体内定义的内置数组,其元素无初始化。 08.6.23使用一组字符字面值初始化字符数组时,一定要记得添加结束字符串的
2008-06-25 00:03:00 394
原创 学习C++primer心得08.6.2--有关vector类
vector ivec; // ivec holds objects of type int vector Sales_vec; // holds Sales_items vector::size_type // ok vector::size_type // errorvecto
2008-06-02 21:23:00 347
原创 学习C++primer心得08.5.31--有关string类
float 只能保证六位有效数字 string 类型支持长度可变的字符串,vector 可用于保存一组指定类型的对象。bitset 类。通过这个类可以把某个值当作们的集合来处理。using std::cin;using namespace std; string s1;
2008-06-01 00:04:00 351
原创 学习C++primer心得08.5.27
typedef 可以用来定义类型的同义词枚举的定义包括关键字 enum,其后是一个可选的枚举类型名,和一个用花括号括起来、用逗号分开的枚举成员列表。 // input is 0, output is 1, and append is 2 enum open_modes {input, output, append}; // shape is 1, s
2008-05-27 23:38:00 462
原创 学习C++primer心得08.5.26
与其他变量不同,除非特别说明,在全局作用域声明的 const 变量是定义该对象的文件的局部变量。此变量只存在于那个文件中,不能被其他文件访问。通过指定 const 变更为 extern,就可以在整个程序中访问 const 对象:const int buf;error C2734: buf : const object must be initialized if not ex
2008-05-27 20:05:00 350
原创 学习C++primer心得08.5.25以前
1.2. 初窥输入/输出endl 是一个特殊值,称为操纵符,将它写入输出流时,具有输出换行的效果,并刷新与设备相关联的缓冲区。通过刷新缓冲区,用户可立即看到写入到流中的输出。#include ---〉 std::cin>>#include ---〉cin>>标准库的头文件用尖括号 括起来,非标准库的头文件用双引号 " " 括起来。当调用成员函数时,(通常)指定函数要操作的对象。语法是使
2008-05-26 20:52:00 545
Android 2.0游戏开发实战宝典-源代码-13-16章
2010-09-20
Android中文文档.pdf
2010-07-20
mac os 声卡驱动 AzaliaAudio.pkg
2010-03-13
[最新iPhone,iPod,Mac.OS.X.Leopard系列电子书].Switching to the Mac The Missing Manual Leopard Edition
2010-02-11
[最新iPhone,iPod,Mac.OS.X.Leopard系列电子书]. iPhone Open Application Development
2010-02-11
问题-求助-jsfdemo
2009-05-16
数据挖掘.pdf数据挖掘.pdf
2009-05-16
《算法导论》习题解答.rar
2009-05-16
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人