Task4 建模调参

Task4 建模调参
学习材料地址
https://tianchi.aliyun.com/notebook-ai/detail?spm=5176.12586969.1002.18.1cd8593aw4bbL5&postId=95460
4.4.1 读取数据
reduce_mem_usage函数没看懂
4.4.2
对标签进行log(x+1)变换,使标签由原来的长尾分布贴近于正态分布
选用靠前时间的4/5样本当作训练集,靠后时间的1/5当作验证集
L1正则化与L2正则化的区别
L2正则化在拟合过程中通常都倾向于让权值尽可能小,最后构造一个所有参数都比较小的模型。L1正则化有助于生成一个稀疏权值矩阵,进而可以用于特征选择。
4.4.4 模型调参
调参部分以前很少研究,很多时候都是瞎几把调一通,值得仔细研究一番。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
根据引用\[1\]和引用\[2\]的内容,调参是指在深度学习模型中调整超参数的过程。超参数包括学习率、批量大小、动量和权重衰减等。调参的目的是找到这些超参数的最佳值,以使得模型能够获得最佳的结果。在调参过程中,需要根据模型的复杂性和情况来确定隐藏层的层数。一般来说,对于复杂模型来说,全连接层不需要设置过深,通常1-2层就可以满足需求。调参是一个挑战性的任务,需要在高维空间中找到最佳的超参数组合,以提高模型的性能和准确度。 #### 引用[.reference_title] - *1* [全连接层调参tricks](https://blog.csdn.net/weixin_42419611/article/details/116756820)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* [ 天桥调参师秘籍:一份深度学习超参微调技术指南 ...](https://blog.csdn.net/weixin_33713707/article/details/89551812)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] - *3* [天桥调参师秘籍:一份深度学习超参微调技术指南](https://blog.csdn.net/weixin_33745006/article/details/112013213)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值