redhat_yan-CSDN博客

系列文章目录hadoop大数据-HDFS分布式文件系统hadoop大数据-HDFS分布式文件系统系列文章目录一、hadoop简介二、Hadoop的搭建2.1本地独立模式2.1伪分布式模式的搭建完成分布式的搭建完全分布式的环境搭建完全分布式的配置hadoop结点扩容四、HDFS工作原理一、hadoop简介大数据主要两个点：分布式存储以及分布式计算，基本上计算的调度跟着存储走，因为迁移存储的成本高于计算大数据是个生态，本次学习Hadoop的HDFS分布式文件系统MapReduce离线计算GF

2022-03-01 22:19:29 2010

原创 lamp架构2-lnmp架构的搭建

将启动脚本考入装了mariadb以后才会有这个文件这个是Mysql的全局变量参数，在这里面配置的参数是全局生效的，并且持久化包含很多Mysql数据库的配置参数Mysqld默认会读取的文件初始化参数，一个是安全的，一个是非安全的非安全是没有给管理员加密码，你要进去以后加密码安全的是随机生成了密码为了安全性，让mysql运行在私有用户中，不是直接在root下运行运行完以后生成一个随机密码在启动以后，如果有报错，可以去改路径下去查看netstat - antlp查看.

2022-02-27 19:59:56 2112

原创 lamp架构-nginx的负载均衡与高可用1

Nginx web 7 proxy cdn(cache)www.nginx.com官网 www.nginx.org 下载要下载稳定版本Stable阿里发行的版本Tengine(修改后的Nginx,二次开发)源码编译可以灵活定制你需要的功能相比较rpm包安装源码编译三部曲：configure (这个是个脚本,gnumake)makemake installcamke有缓存（有安装进度），gnumake没有缓存，每次都会重新编译configure(检测预编译环境是否可行)./configur

2022-02-21 23:08:29 1339

原创 shell脚本中的变量4

1.变量的定义变量就是内存一片区域的地址变量的意义命令无法操作一直变化的值，用一串固定的字符来表示不固定的目标可以解决这个问题2.shell脚本中变量的定义方法环境级别：在环境关闭后变量失效在当前sh有这个变量a,当运行脚本后，运行新的sh执行脚本，新sh没有变量a[root@docker3 mnt]# a=1[root@docker3 mnt]# cat test.sh #!/bin/shecho $a[root@docker3 mnt]# sh test.sh [root@doc

2022-02-20 21:05:15 573

原创 shell脚本基础知识3

shell脚本基础知识3

2022-02-20 14:46:25 1129

原创 shell三剑客之awk 2

shell三剑客之awk 2

2022-02-19 22:52:24 801 1

原创 shell文本处理工具-shell三剑客2

文本处理三剑客：grep sed awkgrep用法grep -E = egrep (扩展搜索正文表达式)grep格式grep 匹配条件处理文件(很多正文表达式用不了) |或者[root@docker3 mnt]# grep "bash|root" passwd [root@docker3 mnt]# egrep "bash|root" passwd root:x:0:0:root:/root:/bin/bashtest:root:testoperator:x:11:0:operator

2022-02-18 13:55:05 533

原创 shell脚本常用基础命令(uniq tr test )1

uniq用法-c 合并重复并统计重复个数-d 显示重复的行-u 显示唯一的行[root@docker3 mnt]# sort -n yan | uniq -c 1 2 1 3 1 4 1 7 1 13 2 81 1 123[root@docker3 mnt]# sort -n yan | uniq -d81[root@docker3 mnt]# sort -n yan | uniq -u1234

2022-02-17 16:59:23 671

原创 shell脚本常用基础命令(diff path cut sort)1

diff 用法一般作补丁,用补丁的方式更新脚本Usage: diff [OPTION] files|dir输出信息：【num1,num2】a|c|d 【num3,num4】之前是第一个文件的行之后是第二个文件的行a 添加c 更改d 删除<第一个文件的内容">"第二个文件的内容a添加[root@docker3 mnt]# vim yan[root@docker3 mnt]# cat yan > yan1[root@docker3 mnt]# lsyan y

2022-02-16 23:13:34 650

原创 docker之卷10

卷插件可以实现跨主机共享客户端把请求给docker引擎，引擎再连接插件（存储），插件再连接底层的nfs.插件就相当于一个接口，引擎不能直接连接Nfs。convoy插件

2022-02-14 14:59:12 937

原创 docker之网络（原生网络与自定义网络）9

docker之网络（原生网络与自定义网络）9

2022-02-12 23:16:39 1896

原创 docker之harbor仓库8

官方文档地址：https://goharbor.io/docs/1.10/working-with-projects/working-with-images/pulling-pushing-images/

2022-02-12 13:03:45 864

原创 docker之搭建私有仓库registry7

在生产环境中，你的服务器可能不能上网在内网集群里面，布置容器大量应用的时候，成千上万的，体量很大，分布密度比传统的虚拟化大很多，分布在不同节点上面跑，从远端仓库拉取很消耗网络资源和时间，所以必须在内网里面布置一个私有仓库，让其部署效率变快。官方文档网址：https://docs.docker.com/registry/deploying/在宿主机上面拉取registry镜像[root@docker1 docker]# docker pull registry重要信息[root@docker1

2022-02-06 14:05:10 947 2