自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(3)
  • 收藏
  • 关注

原创 task 3 - 偏差方差理论

(1)什么事偏差和方差 偏差(bias):选择简单模型估计真实函数所带入的误差 方差(variance):用不同数据集估计f时 估计函数的改变 (2)偏差 方差 误差的关系 测试均方误差 = 构建函数在测试数据的方差 + 偏差的平方 + 误差项的方差 (4)ridge regression vs lasso regression:similarity and difference 在线性回归的损失函数的基础上添加对系数的约束或者惩罚 岭回归(L2正则化的例子): ...

2021-07-19 00:32:59 158 1

原创 ensemble learning - Task 2 (回归)

(1)详细阐述线性回归模型的最小二乘法(The method ofleast squares)表达 为了衡量真实值yi与线性回归模型的预测值之间的差距,用的平方和L(w)来描述这种差距, 求使得L(w)最小时对应的参数w,即: 求导: (2) 线性回归中极大似然估计和最小二乘估计的区别和联系 线性回归的最小二乘估计 等价于 噪声的极大似然估计 (3)为什么多项式回归在实际问题表现不佳 多项式回归若阶数过大容易在训练数据集上过拟合,在X的边界处有置信区间明显增大,预测效果...

2021-07-16 12:26:22 143

原创 ensemble learning - CH1-机器学习的数学基础

目前只看了p1-高等数学线代的视频和教案,对矩阵的几何意义做了一些回顾。 作业: 为不同的a,b取值,绘制该函数的3D表面。请问 a,b取值对该表面形状有大的影响吗? 用ipywidgets 快速设定a,b,x1,x2的取值或显示区间,在b=0时 函数为凸函数,在b非0时非凸函数 b<0 b = 0 b>0 2. 编写一个算法来找到它的全局最小值及相应的最小解,并在3D图中标出。分析一下你...

2021-07-14 01:04:53 144

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除