大数据
matao_jack
没有什么可以打败我,除非是我自己不想成功
展开
-
keepalive+lvs
LVS是Linux Virtual Server的简写,意即Linux虚拟服务器,是一个虚拟的服务器集群系统ipvs : 嵌入到linux的内核ipvsadm:管理应用程序类型:NAT:地址转换DR: 直接路由TUN:隧道lvs的调度方法:四种静态:rr:轮循wrr:dh:sh:动态调度方法:lc: 最少连接wlc: 加权最少连接sed: 最短期望延迟nq: ne...原创 2019-07-29 20:38:11 · 694 阅读 · 0 评论 -
Hadoop集群搭建
需求:准备四台安装jdk的虚拟机(仅仅是为了技术而技术)整体规划:搭建r2.6.5的集群总体步骤:一,操作系统环境依赖软件ssh,jdk环境的配置java_home免密钥时间同步hosts,hostname二,hadoop部署/opt/sxt/配置文件修改java_home角色在哪里启动第一步:操作系统环境配置编辑 etc/hosts修改hostname...原创 2019-08-02 21:30:37 · 102 阅读 · 0 评论 -
在hadoop的基础上搭建hive
单用户模式(mysql)首先,我们需要先安装数据库,选择yum安装所以只需要输入命令Yum install mysql-server -y然后启动数据库service mysqld start输入mysql进入数据库修改权限GRANT ALL PRIVILEGES ON . TO ‘root’@’%’ IDENTIFIED BY ‘123’ WITH GRANT OPTION;...原创 2019-08-03 20:41:18 · 181 阅读 · 0 评论 -
搭建HBase集群
Hadoop集群必须准备好1、环境准备 hostname hosts iptables 网络2、时间同步 时间服务器yum install ntp -yntpdate 时间服务器3、免密钥主-主主-从ssh-keygenssh-copy-id nodeX这种命令相对简单4、jdk环境变量jdk安装比较简单将jdk文件解压到/usr/local/jdk 下然后编...原创 2019-08-06 20:26:55 · 114 阅读 · 0 评论 -
逻辑回归梯度下降法
1、逻辑回归的公式为:其中:则:叫做预测函数,一般表示结果取1的概率,那么对于单条样本分类1和0的概率分别为:可以整理成如下格式:2、构造损失函数(cost函数):利用最大似然估计推导损失函数,最大似然估计就是利用已知的样本结果,反推能导致这样结果最大概率的一组参数值。举例:假设一个袋子中只装有未知数的黑球和白球,现在有放回的随机抽取球,做了一次测试,这次测试中抽取了10次...原创 2019-09-06 21:30:32 · 4468 阅读 · 1 评论