自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(20)
  • 收藏
  • 关注

原创 Hive窗口函数(开窗函数)

一、 函数说明over():指定分析函数工作的数据窗口大小,这个数据窗口大小 可能会随着行的变化而变化。current row:当前行n preceding:往前n行数据n following:往后n行数据unbounded:起点unbounded preceding:表示从前面的起点unbounded following:表示到后面的终点LAG(col,n,default_val...

2020-04-03 10:53:26 409

原创 Docker部署Hadoop集群

**关于Docker的安装以及centos镜像的安装前面的文章有实际操作,下面直接进入主题**标题

2020-03-09 09:00:50 231

原创 Linux多台服务器ssh互信脚本

将expect和tcl的软件包下载放到/usr/local/src目录下,解压tcl,进入tcl解压目录,然后进入unix目录进行编译安装[root@server-202 ~]# cd /usr/local/src/[root@server-202 src]# tar -zvxf tcl8.4.11-src.tar.gz[root@server-202 src]# cd tcl8.4.11/...

2019-12-12 11:15:57 883

原创 cobbler安装操作系统(已验证)

部署准备:一台新的VMware虚拟机 没有安装任何软件(编辑器安装就不详细介绍了,例如yum install vim)Cobbler服务器(我这里是Ctenos7)[root@localhost ~]# cat /etc/redhat-release CentOS Linux release 7.7.1908 (Core)[root@localhost ~]# vim /...

2019-11-22 09:35:36 1056

原创 docker-compose安装

1.从github上下载docker-compose二进制文件安装下载docker-compose文件[root@hadoop100 ~]# sudo curl -L https://github.com/docker/compose/releases/download/1.16.1/docker-compose-`uname -s`-`uname -m` -o /usr/local/bin/...

2019-11-07 08:56:12 177

原创 本地镜像如何发布到阿里云?

本地镜像发布到阿里云流程镜像生成的方法dockefile从容器创建一个新的镜像docker commit [OPTIONS] 容器ID[REPOSITORY[:TAG]][root@hadoop101 data]# docker run -it mycentos:1.3[root@19812f201ece local]#------按ctrl+p+q---------[root@h...

2019-10-10 17:03:53 396

原创 Docker安装Redis

从docker hub上拉取redis镜像到本地标为3.2[root@hadoop101 ~]# docker pull redis:3.23.2: Pulling from library/redisf17d81b4b692: Pull complete b32474098757: Pull complete 8980cabe8bc2: Pull complete 58af19693...

2019-10-10 14:34:28 96

原创 Docker常用安装MYSQL

总体步骤搜索镜像拉取镜像查看镜像启动镜像停止容器移除容器安装tomcatdocker hub上面查找tomcat镜像从docker hub上拉取tomcat镜像到本地docker images查看是否有拉取到的tomcat使用tomcat镜像创建容器(也叫运行镜像)安装mysqldocker hub 上面查找musql镜像[root@hadoop101 ~]# ...

2019-10-10 11:48:15 525

原创 DockerFile解析,自定义镜像Tomcat9

Dockerfile是用来构建docker镜像的构建文件,是由一系列命令和参数构成的脚本构建三步骤:1、编写dockerfile文件2、docker build3、docker run

2019-10-10 09:13:04 514

原创 Docker容器数据卷

是什么?将运用与运行的环境打包形成容器运行,运行可以伴随着容器,但是我们对数据的要求希望是持久化的容器之间希望有可能共享数据Docker容器产生的数据,如果不通过docker commit生成新的镜像,使得数据做为镜像的一部分保存下来,那么当容器删除后,数据自然也就没了。为了能保存数据在docker中我们使用卷。能干什么?容器的持久化容器间继承+共享数据卷就是目录或文件,存在于...

2019-09-29 13:51:44 121

原创 Docker 镜像

Docker镜像是什么?镜像是一种轻量级、可执行的独立软件包,用来打包软件运行环境和基于运行环境开发的软件,它包含运行某个软件所需的所有内容,包括代码、运行时、库、环境变量和配置文件。1.UnionFS(联合文件系统):Union文件系统(UnionFS)是一种分层、轻量级并且高性能的文件系统,它支持对文件系统的修改作为一次提交来一层层的叠加,同时可以将不同目录挂载到同一个虚拟文件系统下。U...

2019-09-26 15:52:38 105

原创 以docker容器中的Centos镜像为实例,容器命令

可以把容器看作是一个简易版的Linux环境[root@hadoop101 ~]# docker imagesREPOSITORY TAG IMAGE ID CREATED SIZEnginx latest f949e7d76d63 ...

2019-09-25 16:56:17 729

原创 Cannot connect to the Docker daemon at unix:///var/run/docker.sock. Is the docker daemon running?

[root@hadoop101 ~]# docker images执行后发现报错如下:Cannot connect to the Docker daemon at unix:///var/run/docker.sock. Is the docker daemon running?按如下操作解决了这个问题:[root@hadoop101 ~]# systemctl daemon-reload...

2019-09-12 11:17:38 607

原创 使用 docker 构建一个 web 应用程序

在docker容器中运行一个 Python Flask 应用来运行一个web应用#载入镜像[root@localhost ~]# docker pull training/webappUsing default tag: latestlatest: Pulling from training/webapp[DEPRECATION NOTICE] registry v2 schema1...

2019-09-10 16:51:34 993

原创 Centos7安装docker

Centos7安装dockerDocker 要求 CentOS 系统的内核版本高于 3.10 ,查看本页面的前提条件来验证你的CentOS 版本是否支持 Docker 。通过 uname -r 命令查看你当前的内核版本[hadoop@localhost ~]$ uname -r3.10.0-514.el7.x86_64安装 Docker从 2017 年 3 月开始 docke...

2019-09-10 15:03:05 604

原创 MySQL安装

进入命令:mysql -uroot -proot退出:输入exit命令即可5.6版本安装包mysql-5.6.39-linux-glibc2.12-x86_64.tar.gzmy.cnf(mysql配置文件)在root下创建mysql用户:useradd mysql安装目录tar -xvf mysql-5.6.39-linux-glibc2.12-x86_64.tar.gz移动...

2019-07-16 16:40:13 63

原创 hive整合hbase的详细流程

一、转移jar包,其中包括的jar包有:hbase-common-1.2.6.1.jar hbase-server-1.2.6.1.jarhbase-client-1.2.6.1.jar hbase-protocol-1.2.6.1.jarhbase-it-1.2.6.1.jar htrace-core-3.1.0-incubating.jarhbase-hado...

2019-07-16 16:21:52 129

原创 Zookeeper安装

解压文件配置环境变量:Zookeeper解压安装到/home/hadoop/install配置环境变量(增加两条)vim /etc/profileexport ZOOKEEPER_HOME=/home/hadoop/install/zookeeper-3.4.6export PATH=$PATH:$ZOOKEEPER_HOME/binsource /etc/profile修改...

2019-07-16 16:16:45 84

原创 Hbase1.2.6安装文档

1.解压tar -xvf hbase-1.2.6-bin.tar.gz2.配置环境变量vim /etc/profileexport HBASE_HOME=/home/hadoop/install/hbase-1.2.6export PATH=$PATH:$HBASE_HOME/binexport HBASE_MANAGES_ZK=false3.更新配置文件source /etc/...

2019-07-16 13:39:38 108

原创 Hadoop完全分布式集群的搭建

这里写自定义目录标题Hadoop2.7.7版本在Xshell分别连接三个节点,New Session->在name处填写IP地址->设置密码连接即可。三节点配置互信:192.168.97.60为主节点master,61和62为从节点slaveSSH互信原理:预先在目标机用户的authorized_keys文件中保存本机的公钥文件,当本机需要访问目标机时,目标机通过读取本机的公...

2019-07-16 09:09:01 187

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除