![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据小白必看
溪水流长
奇迹无时不刻都在发生
展开
-
使用xsync脚本分发
为什么使用xsync脚本来分发文件因为操作简单,只需要执行脚本在后面加上需要分发的文件就行了然后底层不一致,scp使用的是安全拷贝,而xsync使用的是增量拷贝由于底层不一致,xsync比scp快上许多使用脚本来分发文件之前不同节点之间的免密登录安排上脚本实现#!/bin/bash#1 输入参数个数,如果没有参数就会退出pcount=$#if((pcount==0)); thenecho no args;exit;fi#2 需要分发的文件名称p1=$1fname=`原创 2021-11-10 18:28:18 · 3941 阅读 · 1 评论 -
centerOS7卸载MySQL
centerOS7卸载MySQL使用rpm -qa|grep -i mysql命令来搜索系统中安装的MySQLrpm -qa|grep -i mysql如果出现了如下图所示说明系统中安装了MySQL![在这里插入图片描述](https://img-blog.csdnimg.cn/2021071921131723.png)123123...原创 2021-07-19 21:27:12 · 269 阅读 · 0 评论 -
大数据挖掘型标签RFM/RFE/PSM
挖掘标签KMeans监督学习 对目标有期望值(目标值)无监督学习 对目标没有对应的期望值(目标值)半监督学习 对目标有部分的期望值(目标值)强化学习 目标不断与外界交互获得反馈,决定自身的行为 ps 阿尔法狗用户价值模型-RFMXXX网店,6-18期间得活动到底发给谁????例如有50w历史用户,如何对用户分群???使用RFM模型对用户分群RFM是Rencency(最近一次消费)---- 最后一次得消费得时间Frequency(消费频率) ---- 消费次数(半年内/一年内/所原创 2020-07-02 21:02:40 · 1348 阅读 · 0 评论 -
Kylin实践
此实践是在安装好kylin,并且成功进入http://IP:7070/kylin/login 界面之后的操作哦登录Kylin在hive测试加载数据(此实践数据存放在结尾)准备测试数据创建数据库、表、加载数据create table dw_sales(id string,date1 string,channelId string, productId string, regionId string,amount int,price double)ROW FORMAT DELIMITED FIELD原创 2020-05-15 01:31:02 · 228 阅读 · 0 评论 -
Ki No ''Azkaban'' Da
solo-server模式部署节点规划host角色node-1Web Server和Executor Server同一进程ps:此教程适用azkaban编译后部署1解压配置mkdir /export/servers/azkabantar -zxvf azkaban-solo-server-0.1.0-SNAPSHOT.tar.gz –C /export/ser...原创 2019-12-07 17:13:29 · 1331 阅读 · 0 评论