随机森林原始论文_深度学习--随机种子

深度学习中的随机种子影响着模型的初始化和训练过程中的随机性,虽然设置随机种子能减小实验结果的差异,但由于mini-batch SGD等训练方式的内在随机性,完全复现论文结果仍具挑战。
摘要由CSDN通过智能技术生成

944cb151ddf771cd557d9a5cbbe390dc.png

1 随机数

真正的随机数是使用物理现象产生的,比如:投掷钱币,等现场,这样的随机数发生器叫做物理性随机数发生器,它们的缺点是技术要求比较高。

这种通过物理性随机数发生器生成的真随机数,才是真正的随机,也即体现绝对的公平。

2 伪随机数

伪随机数其实是有规律的,只不过这个规律周期比较长,但还是可以预测的。主要原因就是伪随机数是计算机使用算法模拟出来的,这个过程并不涉及到物理过程,所以自然不可能具有真随机数的特性。

深度学习中的随机种子,其实是伪随机数,意思是这些数其实是有规律的,只不过因为算法规律太复杂,很难看出来而已。

但是,再厉害的算法,如果没有一个初始值,它也不可能凭空造出一系列随机数来,我们说的种子就是这个初始值。

random随机数是这样生成的:我们将这套复杂的算法(是叫随机数生成器吧)看成一个黑盒,把我们准备好的种子扔进去,它会返给你两个东西,一个是你想要的随机数,另一个是保证能生成下一个随机数的新的种子,把新的种子放进黑盒,又得到一个新的随机数和一个新的种子,从此在生成随机数的路上越走越远。

所以只要你没改变种子,那么你得到的随机数就不会改变。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值