- 博客(37)
- 资源 (2)
- 收藏
- 关注
原创 docker单机安装MongoDB
docker镜像库:https://hub.docker.com/search?q=&type=imagemongodb镜像地址:https://hub.docker.com/_/mongo?tab=tags官网安装文档:https://docs.mongodb.com/manual/administration/install-on-linux/命令来查看可用版本:docker search mongo2.拉取镜像docker pull mongo:latest3.查看本地镜像/查
2021-12-08 10:21:20
427
原创 Anaconda在linux服务器安装
anaconda包下载地址:https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/上传安装包Anaconda3-2019.10-Linux-x86_64.sh至服务器apps文件夹下3.安装conda环境 ./Anaconda3-2019.10-Linux-x86_64.sh点击enter输如yes选择conda环境 默认/root/anaconda3,此处enter回车是否初始化anaconda3yes安装完成4.设置
2021-11-18 10:35:55
336
原创 flink1.12.5安装
flink下载镜像地址:https://dlcdn.apache.org/flink/flink-1.12.5/官方下载地址:https://flink.apache.org/zh/downloads.htmlflink官网地址英文:https://flink.apache.org/中文 :https://flink.apache.org/zh/flink教程:https://nightlies.apache.org/flink/flink-docs-release-1.14/zh//docs/t
2021-11-17 15:55:55
1529
原创 kafaka2.13-2.8.1集群安装
kafka镜像:https://dlcdn.apache.org/kafka/2.8.1/kafka官网:http://kafka.apache.org/kafka文档:kafka实例:broker1,broker2,broker3.环境:kafka集群2.8.1+zookeeper3.62集群+JDK1.8关闭:防火墙kafka目录结构:1.解压kafaka2.13-2.8.1并重命名kafkatar -zxvf kafka_2.13-2.8.1.tgzmv kafka_2.13-2
2021-11-05 09:27:34
1841
原创 grafana安装及集成promethemus
grafana下载地址:https://grafana.com/grafana/download环境:grafana-7.5.2.linux-amd64.tar.gz1.上传文件并解压grafana-7.5.2.linux-amd64.tar.gztar -zxvf grafana-7.5.2.linux-amd64.tar.g2.进入grafana-7.5.2目录并启动nohup ./bin/grafana-server web > ./grafana.log 2>&1
2021-11-02 08:57:43
274
原创 prometheus安装-监控clickhouse
prometheus官网:https://prometheus.io/下载地址:https://prometheus.io/download/prometheus历史github地址:https://github.com/prometheus/prometheus/releases此处选用:prometheus-2.26.0.linux-amd64.tar.gz安装步骤1.clickhouse的config.xml配置文件打开promethmus注释,重启clickhouse服务器<pr
2021-11-02 08:51:07
769
原创 ClickHouse 20.8.7.15 集群配置
部署参考文档:https://cloud.yandex.com/en/docs/managed-clickhouse/中文文档:https://clickhouse.com/docs/zh/getting-started/playground/gui工具举例:https://clickhouse.com/docs/zh/interfaces/third-party/gui/odbc驱动:https://packagecloud.io/Altinity/clickhouse版本:ClickHouse
2021-11-02 08:45:30
386
原创 hive安装:3.1.2版本
hive安装:3.1.2版本hive下载地址: https://downloads.apache.org/hive/hive-3.1.2/apache-hive-3.1.2-bin.tar.gz或者镜像:https://dlcdn.apache.org/hive/hive-3.1.2/hive的home目录:https://cwiki.apache.org/confluence/display/Hive/Homehive安装文档:https://cwiki.apache.org/confluence
2021-10-11 21:13:09
1007
原创 hbase2.4.6集群
hbase2.4.6集群安装文档hbase下载地址:https://dlcdn.apache.org/hbase/2.4.6/hbase学习文档:英文文档:https://hbase.apache.org/book.html默认配置搜索:Default Configuration所需环境:hadoop集群+zookeeper集群+jdkhadoop3.2.2.tar.gzapache-zookeeper-3.6.3-bin.tar.gz安装hbase版本:hbase-2.4.6-bin.ta
2021-10-08 23:33:06
352
原创 zookeeper-3.6.3安装文档(单机或集群)
apache-zookeeper-3.6.3-bin.tar.gzzookeeper镜像地址:https://dlcdn.apache.org/zookeeper/zookeeper-3.6.3/zookeeper官网:https://zookeeper.apache.org/zookeeper下载:https://zookeeper.apache.org/releases.htmlzookeeper3.6.3文档:http://zookeeper.apache.org/doc/r3.6.3/ind
2021-09-29 10:10:57
840
原创 hadoop3.2.2集群
镜像文件下载地址:https://dlcdn.apache.org/hadoop/common/hadoop-3.2.2/hadoop3.2.2文档:https://hadoop.apache.org/docs/r3.2.2/hadoop3.2.2集群部署1.环境redhat7.5+hadoop3.2.2+jdk1.81+2.iso镜像挂载 0_master_local_yum.sh#!/bin/shbase_path=$(cd `dirname $0`; pwd)iso_path=${
2021-09-28 10:34:36
431
原创 VMware虚拟机中添加新硬盘的方法
一、VMware新增磁盘的设置步骤(建议:在设置虚拟的时候,不要运行虚拟机的系统,不然添加了新的虚拟磁盘则要重启虚拟机)1、选择“VM”----“设置”并打开,将光标定位在“硬盘(SCSI)”这一选项,然后点击下方的“添加”按钮2、点击下一步,执行下一个步骤3.选择磁盘类型4、根据提示,创建一个虚拟的磁盘,并点击下一步5.设置磁盘大小,点击下一步6.选择存储位置,最后点击完成以下是对虚拟机中Linux和widows中对于新的虚拟磁盘的挂载的方式的介绍二、虚拟机中windows对
2021-09-25 20:51:32
8693
原创 redis安装
redis服务安装文档1.tar.gz包安装1.下载redis安装包下载网址: https://redis.io/download2.环境redhat7.5+redis-6.2.5.tar.gz(默认此处镜像挂载完毕)解压tar -zxvf redis-6.2.5.tar.gz进入目录cd redis-6.2.5编译make修改配置文件redis.confvi redis.conf注释bind 127.0.0.1修改daemonize no启动服务cd red
2021-09-10 17:11:25
80
原创 linux文件传输及同步命令
linux文件传输及同步命令解释: 命令 选线参数 要拷贝的文件路径/名称 目的用户@主机:目的路径/名称scp (secure copy)用于远程的文件的复制scp -r /soft/hadoop/ [root@hadoop1:/soft](mailto:root@hadoop1:/soft/)rsync 是 remote sync 的缩写,用于linux系统下的数据镜像备份工具,远程服务器之间的文件拷贝.特点:速度快,避免复制相同内容和支持符号链接的优点rsync -rvl /soft/h
2021-08-26 15:53:59
1392
原创 帆软8.0在linux安装(centos7)
帆软8.0在linux安装(centos7)jdk配置:jdk官网下载地址: https://www.oracle.com/java/technologies/javase/javase-jdk8-downloads.html百度云盘:链接:https://pan.baidu.com/s/1xGowznGr6St8NFa7Ti0cLQ提取码:cjiz进入根目录:cd /新建文件夹:mkdir appssecurefx上传文件: jdk-8u181-linux-x64.tar.gz解压jdk
2021-08-24 14:44:46
1403
1
原创 hive(数据仓库工具)
hive(数据仓库工具)用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句转变成MapReduce任务来执行。Hive的优点是学习成本低,可以通过类似SQL语句实现快速MapReduce统计,使MapReduce变得更加简单,而不必开发专门的MapReduce应用程序。hive十分适合对数据仓库进行统计分析1.简介:hive是基于Hadoop构建的一套数据仓库
2021-08-24 13:48:11
844
原创 Hbase 安装部署及常用操作
Hbase(实时分布式数据库): NoSql的数据库,像其他数据库一样提供随即读写功能 列式存储链式的存储,结构化数据的可伸缩可扩展高性能面向链的数据库。非常大,快速查询,秒级别查询上亿,可进行实时查询HBase 是一个建立在 HDFS 之上,面向列的 NoSQL 数据库,用于快速读/写大量数据,HBase 使用 Zookeeper 进行管理。HBase 是按列族进行数据存储的。每个列族会包括许多列,并且这些列是经常需要同时处理的属性。也就是说,HBase 把经常需要一起处理的列构成列族一起存放,从
2021-08-19 17:38:28
381
原创 linux常用命令
linux命令linux常用命令lscdmkdirvi/vimcpmvrmtouch/echotar/zip/unzipdf/du/fdiskfree/topunamelinux高级命令netstat/lsof辅助命令treewgethead/taillinux常用命令ls解释ls list files 命令用于显示指定工作目录下之内容(列出目前工作目录所含之文件及子目录)常用ls -al -a 显示所有文件及目录
2021-08-16 11:22:18
80
原创 shell命令
shell命令Linux 的 Shell 种类众多,常见的有:Bourne Shell(/usr/bin/sh或/bin/sh) 用这个Bourne Again Shell(/bin/bash)C Shell(/usr/bin/csh)K Shell(/usr/bin/ksh)Shell for Root(/sbin/sh)在一般情况下,人们并不区分 Bourne Shell 和 Bourne Again Shell,所以,像 #!/bin/sh,它同样也可以改为 #!/bin/bash
2021-07-30 23:26:14
213
原创 docker安装tomcat
docker安装tomcat(centos7)dockerhub: https://hub.docker.com/search?q=&type=edition&offering=communitydocker的tomcat:https://hub.docker.com/_/tomcat?tab=tags&page=1&ordering=last_updated1.查找tomcatdocker search tomcat2.拉取官方的镜像docker pull to
2021-07-20 23:50:36
81
原创 正则表达式
正则表达式:^ 为匹配输入字符串的开始位置 runoo+b,可以匹配 runoob、runooob、runoooooob 等,+ 号代表前面的字符必须至少出现一次(1次或多次)。runoo*b,可以匹配 runob、runoob、runoooooob 等,* 号代表字符可以不出现,也可以出现一次或者多次(0次、或1次、或多次)。colou?r 可以匹配 color 或者 colour,? 问号代表前面的字符最多只可以出现一次(0次、或1次)。\转义字符 反斜杠(右斜杠)$ 匹配输入字符串的结尾
2021-07-18 22:42:12
367
原创 postgresql12.2安装
postgresql12.2安装官网: https://www.postgresql.org/安装环境:postgresql12.2+centos7.01.下载文件postgresql-12.2.tar.bz2到soft文件夹下wget https://ftp.postgresql.org/pub/source/v12.2/postgresql-12.2.tar.bz2 或者访问下载页面:postgres.cn/v2/download 选取下载安装版本postgresql-12.2.tar
2021-07-01 11:49:22
866
原创 hadoop3.2.2部署-单机
apache hadoop 部署笔记:单机版本安装环境:jdk1.8.0_181+hadoop3.2.21.官网地址:http://hadoop.apache.org/帮助文档: https://hadoop.apache.org/docs/r3.2.2/hadoop-project-dist/hadoop-common/SingleCluster.html2.hadoop的核心:1.HDFS: Hadoop Distributed File System 分布式文件系统2.YARN: Yet
2021-06-29 00:47:22
1083
原创 docker 常用命令
docker 常用命令中文社区官网: https://www.docker.org.cn/index.htmldocker:镜像地址 https://hub.docker.com/学习文档:http://c.biancheng.net/view/3124.html一旦容器从镜像启动后,二者之间就变成了互相依赖的关系,并且在镜像上启动的容器全部停止之前,镜像是无法被删除的。尝试删除镜像而不停止或销毁使用它的容器,会导致出错。启动创建:docker run 或者docker create启动:
2021-06-24 22:03:46
725
原创 docker安装包离线脚本安装
docker安装包离线脚本安装:环境: 系统centos7: ip:192.168.189.15docker版本: docker-18.06.1-ce.tgz 1.学习文档及安装包下载地址官网学习文档: https://docs.docker.com/engine/install/centos/#prerequisitesdocker安装包下载地址: https://download.docker.com/linux/static/stable/x86_64/百度云盘资源地址:链接:htt
2021-06-14 23:43:44
642
3
原创 Docker安装及fastdfs安装(单机版本)
Docker安装及fastdfs安装(单机版本)运行环境:centos7.0,docker-18.06.1-ce,fastdfs v6.0.7 ip地址:192.168.189.151.获取安装包及安装脚本文件(百度云连接)链接:https://pan.baidu.com/s/18Z2ahkjFXBfJiVYf7eT2fw提取码:69hw2.上传文件到linux服务器dockerfastdfsservice.sh脚本文件和docker.tar.gz在同一目录3.赋dockerfastdfss
2021-06-12 21:45:08
346
原创 vmvare及网络ip地址配置
vmvare-workstation配置三种网络模式: 桥接、NAT、仅主机模式 在桥接模式下,VMware操作系统就像局域网中的一个独立的主机,可以访问局域网内任何一台机器。利用VMware在局域网内新建一个虚拟服务器,无障碍和本机及所在局域网的其他主机器进行通信,为局域网用户提供网络服务,就应该选择桥接模式NAT(网络地址转换模式): 是让虚拟系统借助NAT(网络地址转换)功能,通过宿主机器所在的网络来访问公网。也就是说,使用NAT模式可以实现在虚拟系统里访问互联网。 虚拟机中要设置
2021-05-19 23:12:42
336
原创 centos安装图形化界面及vnc-server连接
centos安装图形化界面yum groupinstall -y “X Window System”yum groups install -y “GNOME Desktop” “Graphical Administration Tools”错误:file /boot/efi/EFI/centos from install of fwupdate-efi-12-5.e17.centos.x86_64 conflicts with file fryum update grub2-commonyum
2021-05-18 23:53:55
277
原创 JDK1.8安装步骤
jdk官网下载地址: https://www.oracle.com/java/technologies/javase/javase-jdk8-downloads.html百度云盘:链接:https://pan.baidu.com/s/1xGowznGr6St8NFa7Ti0cLQ提取码:cjiz1.进入根目录:cd /2.新建文件夹:mkdir apps3.securefx上传文件: jdk-8u181-linux-x64.tar.gz解压jdk:tar -zxvf jdk-8u181-li
2021-05-18 23:24:14
8405
原创 nginx安装:
nginx安装:解这两种代理的关键在于代理服务器所代理的对象是什么,正向代理代理的是客户端,我们需要在客户端进行一些代理的设置。而反向代理代理的是服务器,作为客户端的我们是无法感知到服务器的真实存在的。正向代理代理客户端,反向代理代理服务器。** nginx的下载 http://nginx.org/en/download.html 安装编译工具yum -y install make zlib zlib-devel gcc-c++ libtool openssl openssl-deve
2021-05-16 22:02:29
88
原创 mysql安包安装
mysql-8.22安装包安装简介:安装环境:centos7.0服务器mysql下载官网:https://dev.mysql.com/downloads/mysql/mysql版本安装包下载列表地址: https://downloads.mysql.com/archives/community/上传安装包: mysql-8.0.22-1.el7.x86_64.rpm-bundle.tartar -xvf mysql-8.0.22-1.el7.x86_64.rpm-bundle.tarmysql-
2021-05-16 21:38:19
264
原创 docker安装mysql
docker安装mysql访问 MySQL 镜像库地址:https://hub.docker.com/_/mysql?tab=tags 。编辑镜像下载地址:vi /etc/docker/daemon.json{"registry-mirrors":["https://reg-mirror.qiniu.com/"]}报错:docker报错Get https://registry-1.docker.io/v2/: x509: certificate has expired or is not y
2021-05-16 21:15:38
94
原创 安装KETTLE教程,并配置执行定时任务
#CentOS7.0(Linux)安装KETTLE教程 并配置执行定时任务下载路径 https://sourceforge.net/projects/pentaho/files/Data%20Integration/1.安装jdk:上传jdkjdk-8u181-linux-x64.tar.gz解压重命名:tar -zxvf jdk-8u181-linux-x64.tar.gz jdk1.8.0_1812.打开配置文件vim /etc/profile末尾添加 i 进入编辑模式expor
2021-05-11 16:58:30
3143
原创 Clickhouse数据库安装-单机版本(centos7.0)
Clickhouse数据库安装Clickhouse 仅支持Linux 且必须支持SSE4.2 指令集 :centos7命令:grep -q sse4_2 /proc/cpuinfo && echo "SSE 4.2 supported" || echo "SSE 4.2 not supported"结果:SSE 4.2 supportedclickhouse下载地址: https://packagecloud.io/Altinity/clickhouse安装存储库命令: cu
2021-05-11 16:09:02
456
原创 DATAX+DATAX_WEB 安装
参考路径:https://github.com/alibaba/DataXDATAX安装法一(简单):环境准备:jdk1.8以上,python2.6以上,apache maven 3.x( Compile DataX )下载datax地址:http://datax-opensource.oss-cn-hangzhou.aliyuncs.com/datax.tar.gz1.上传datax.tar.gz到soft目录并解压: tar -zxvf datax.tar.gz2.删除安装包: rm -rf
2021-05-11 15:57:54
1124
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人