qq_36711289的博客

原创 算法梳理进阶线性回归(二)

文章目录上次简单介绍了线性回归原理以及公式推导，今天用python代码简单实现下单变量线性回归：# -*- coding:utf-8 -*-import numpy as npfrom matplotlib import pylab as plclass LRArithmetic: def __init__(self, x, y): """ ...

原创 联邦学习图片

原创 算法梳理进阶线性回归(四)

文章目录波士顿房产数据展示多变量线性回归公式推导以及代码实现数据标准化结果截图网格搜索GridSearchCV波士顿房产数据展示多变量线性回归公式推导以及代码实现多元线性回归也可以使用最小二乘法对α 和 β 进行估计。预测模型为：对求导得到当为满秩矩阵或正定矩阵时，可以变换为其中是矩阵的逆矩阵，最终学得的多元线性回归模型为：这里默认为满秩矩阵，如果非满秩矩阵，可以使用梯度...

原创 算法梳理进阶线性回归(三)

文章目录代码实现效果代码实现# -*- coding:utf-8 -*-import sklearn.datasets as datasetsfrom sklearn.linear_model import LinearRegressionfrom sklearn.metrics import mean_squared_error, mean_absolute_error, r2_sc...

原创 算法梳理进阶线性回归(一)

文章目录1. 机器学习的一些概念1.1 机器学习是什么？1.2 有监督学习1.3 无监督学习1.4 半监督学习1.5 集成学习1.6 强化学习1.7 泛化能力1.8 过拟合1.9 欠拟合1.10 欠拟合-过拟合与偏差-方差的关系1.11 交叉验证2. 线性回归2.1 线性回归原理3. 线性回归损失函数、代价函数、目标函数基本概念3.1 基本概念4. 一元线性回归的参数求解公式推导5. 多元线性回归...

原创 Spark RDD - histogram详解

histogram - - 直方图val a = sc.parallelize(List(1.1,1.2,1.3,2.0,2.1,7.4,7.5,7.6,8.8,9.0),3) a.histogram(5) res0:(Array[Double], Array[Long]) = (Array(1.1, 2.68, 4.26, 5.84, 7.42, 9.0),Array(5, 0, 0, 1

原创 解决rpc在centos下安装的mysql的乱码问题

1、安装mysql之后默认的字符编码为latin1 登录mysql可以通过show variables like ‘%char%’查看，显示如下 2、进入/usr/share/mysql目录之后，拷贝my-medium.cnf 到/etc下,如果没有该文件则是my-default.cnf 在最后添加[client] #password = your_password po

原创 hadoop集群搭建-Mysql安装

## 安装的版本是MySQL-5.6.22-1.el6.i686.rpm-bundle.tar 其他版本安装步骤基本一致，官网进行下载##1.查看CentOS自带的mysql

1 1.1输入：rpm-qa|grep-imysql 2.将自带的mysql卸载2.1输入: rpm -e –nodeps mysql-XXXX.i6863.删除原旧版本剩余的文件rm -rf

原创 hadoop集群搭建之hive安装

Hive只在一个节点上安装即可 1.上传tar包 2.解压 tar -zxvf hive-0.9.0.tar.gz -C /cloud/ 3.安装mysql数据库（切换到root用户）（装在哪里没有限制，只有能联通hadoop集群的节点） mysql安装仅供参考，不同版本mysql有各自的安装流程 rpm -qa | grep mysql rpm -e mysql-libs-

转载 Hadoop集群之hive安装

转自:https://yin912.wordpress.com/