- 博客(13)
- 收藏
- 关注
RSS订阅原创 Git 上传gitHub
Git 上传gitHubVPN这个鬼搞死我。。。不连vpn ping不同github, 连上vpn给我开局域网代理。这么一顿操作下来，是解决了。都可以试试…设置局域网代理网络&Internet 设置使用代理服务器 取消勾选防火墙防火墙关闭配置hosts文件参考大佬：https://blog.csdn.net/qq_42102911/article/details/1214856721.首先打开 ipaddress.com 网站，查询以下网址对应地IP网站地址 ：https:
2022-01-25 10:42:51
828
原创 Hive 求用户连续登录的最大天数，统计出用户、最大天数、开始时间、结束时间
求用户连续登录的最大天数，统计出用户、最大天数、开始时间、结束时间数据pk, 20210801pk, 20210802pk, 20210803pk, 20210804pk, 20210806pk, 20210807pk, 20210808pk, 20210811pk, 20210812ruoze,20210730ruoze,20210731ruoze,20210801ruoze,20210804ruoze,20210806最终结果name cnt start_date
2021-11-17 16:40:36
2535
原创 Hive 3.1.2Linux CentOs 安装，踩坑 Dbeaver 连接Hive
安装hive 3.1.2版本前提：hadoop 3.2.2jdk 1.8.0mysql: 5.7下载wget https://mirrors.tuna.tsinghua.edu.cn/apache/hive/hive-3.1.2/apache-hive-3.1.2-bin.tar.gz --no-check-certificate解压tar -xzvf apache-hive-3.1.2-bin.tar.gz -C ../app软连接ln -s apache-hive-3.1.2-bi
2021-11-17 09:14:21
1360
原创 Hadoop 3.2.2 安装-超级详细——有问题私信我
更改主机名vim /etc/hostsvim /etc/hostnamereboot创建hadoop用户(https://www.cnblogs.com/xingxuexue/p/12895244.html)1、首先新建用户，adduser命令sudo adduser hadooppasswd hadoop输入密码之后，一路 y 确定。2、添加用户组在创建hadoop用户的同时也创建了hadoop用户组，下面我们把hadoop用户加入到hadoop用户组下面前面一个hadoo
2021-11-17 09:12:30
2578
2
原创 dolphinscheduler 单点部署 踩坑
官网文档： https://dolphinscheduler.apache.org/zh-cn/docs/1.3.6/user_doc/standalone-deployment.html官网下载：https://www.apache.org/dyn/closer.lua/dolphinscheduler/1.3.6/apache-dolphinscheduler-1.3.6-bin.tar.gz官网挺详细的，但有几个补充的地方（1）mysql-connector-java-5.1.47.jar 放.
2021-09-06 16:50:47
829
原创 Flume 案例
案例官网例子 监听localhost机器的44444端口，接收到数据sink到logger终端example.conf: A single-node Flume configuration第一步：配置example.conf文件（如果是本地windows写好再上传到服务器，一定要确认是否为unix格式。方法：vi example.conf : set ff? unix 就是对的）我的是在flume 文件夹## Name the components on this agent
2021-09-05 16:40:44
444
原创 Flume 架构
Flume 架构Flume 架构图上图是Flume官网最基础的数据流图。后面还会介绍多路复用、拦截等不同配置。Flume Event定义一行文本内容被反序列化成一个event。event的最大定义为2048字节，超过会被切割放到下一个event中。event 包含两个 header、bodyheader是一个map，body是一个字节数组body是真正传输的数据，header传输的数据不会被sink出去。源码Event.java (Interface)package or
2021-09-03 14:51:41
358
原创 Flume 简介
Flume 简介官网： http://flume.apache.org/Flume 可视为数据的搬运工，一般用来收集日志，将日志数据从A->B优势官网对Flume的介绍如下：Flume is a distributed, reliable, and available service for efficiently collecting, aggregating, and moving large amounts of log data. It has a simple and
2021-08-30 10:53:09
195
原创 安装jdk
安装jdk （ 重点修改组、用户组）第一步：上传jdk文件从windows到linux上传命令：rzrz第二步：创建java文件夹，在/usr/路径下mkdir -p /usr/java/第三步：解压缩tar包到指定目录tar -xzvf jdk-8u181-linux-x64.tar.gz -C /usr/java/在按到jdk的时候可以按一下tab键自动补全【新手请记住】第四步： cd 到java路径下查看命令1： cd /usr/java命令2：ll cd /us
2021-08-30 10:49:38
209
原创 运维小记 - 开机自启动 docker/http - 挂载windows共享文件夹目录
开机自启动 http/docker服务器上周宕机了，服务器自动重启后，这两个服务没有重启导致业务无法正常运转。systemctl enable docker.servicesystemctl enable httpd.service挂载windows共享文件夹挂载出错1：[root@localhost ~]# sudo mount -t cifs -o vers=2.0 //ip/data /mnt/datamount error(13): Permission deniedRefer t
2021-08-18 10:42:14
272
原创 Zookeeper 报错 zookeeper Invalid config, exiting abnormally
Zookeeper 报错 zookeeper Invalid config, exiting abnormally问题：Zookeeper启动时 Error contacting service. It is probably not running.日志排查Error: zookeeper Invalid config, exiting abnormally解决我的zookeeper zoo.cfg配置新加了dataLogDir，但该路径没有创建…如果出现该报错信息，可以查看dataDir目
2021-08-06 09:54:53
700
原创 Linux mysql5.7安装-超级详细
Linux mysql5.7安装-超级详细步骤：本文安装是5.7版本步骤参考视频-若泽讲解安装步骤面试时要按下面大概说出来check 系统是否安装或运行Mysqldownload mysql 源码包和解压创建管理用户mysqladmin和用户组dba配置**/etc/my.cnf**对4的文件和源码文件夹赋权限（用户、用户组、RWX）配置Mysql服务和设置开机自动启动切换mysqladmin ，编译安装mysql启动mysql服务使用mysql命令登录配置环境变量官网下载：
2021-06-18 15:55:20
402
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人