![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
面试经验
@you_123
这个作者很懒,什么都没留下…
展开
-
2020大华校招算法工程师初面总结
1.自我介绍2.项目介绍 这里会根据项目,问一些问题,比如用到的算法、项目效果等3.神经网络训练用到的初始化方法,不同的初始化方法会有什么样的不同,举例说明 1.为什么要初始化 防止CNN在前向传播过程中层激活函数的输出损失梯度出现爆炸或消失。 2.Xavier初始化又称“正则化初始化” 将每层权重设置为在有界的随机均匀分布中选择的值 3.Kaiming初始化 从头开始训...原创 2019-09-19 18:44:10 · 1057 阅读 · 0 评论 -
神经网络训练正则化方法总结
1. L1、L2正则化在loss函数上添加权重的L1/L2范数,作为正则化项。L1正则化有助于生成一个稀疏权值矩阵,让有效特征数量变少,常用于特征选择;L2正则化可以压缩权重,常用于 w, 权重绝对值大小会整体倾向于减小,不会出现特别大的值,是训练时的常规手段。2.数据增强向数据中添加噪声和人工扰动来提升网络的泛化能力,如颜色变换、几何变换等;优点:易于实现和使用,是训练时的必备...原创 2019-09-20 16:01:08 · 997 阅读 · 0 评论