- 博客(36)
- 收藏
- 关注
RSS订阅原创 mysql8.0安装和基本命令
一、MySQL服务的管理 启动 systemctl start mysqld 停止 systemctl stop mysqld 重启 systemctl restart mysqld 查看mysqld的状态 systemctl status mysqld 随机启动 systemctl enable mysqld 禁止随机启动 systemctl disable mysqld二、进程和端口的查看 ps -efww | gre...
2022-04-15 11:13:26
2413
原创 小网站建立的步骤
一、小网站建立的步骤 在windows上操作 1.1 编辑c:/system32/drivers/etc/hosts,在此文件中的最后一行追加 192.168.30.2 www.aaa.com 1.2 安装nginx # 在linux上操作 yum install -y epel* yum install -y nginx # 启动nginx nginx 1...
2022-04-13 15:08:12
3470
1
原创 路由器实验步骤
一、路由器的实验 三台虚拟机： A虚拟机的配置： 只需要将网卡配置成：192.168.1.2 子网掩码：255.255.255.0 网关：192.168.1.6 B虚拟机的配置： cp /etc/sysconfig/network-scripts/ifcfg-ens32 /etc/sysconfig/network-scripts/ifcfg-ens32:0 vim /etc/sysconfig/network-sc...
2022-04-12 12:25:31
1330
原创 IP地址的分类
一、IP地址的意义 IP地址是计算机联网的通行证二、ip地址的范围是什么 0.0.0.0 - 255.255.255.255三、ip地址范围的由来 3.1 ip地址是由32位组成的数字，而且是使用点分十进制 0000 0000-11111111 0-255（十进制） 0000 0000-11111111 0-255 0000 0000-11111111 0-255 0000 0000-11111111 0-255 四...
2022-04-12 12:24:25
442
原创 NFS服务的安装部署
在server端部署一、安装nfs yum install -y nfs-utils二、配置 vim /etc/exports /data 192.168.129.0/24(rw)三、创建/data文件夹 mkdir /data四、确认几个服务是否关闭 systemctl stop firewalld cat /etc/selinux/config 里的SELINUX是否等于disabled五、启动服务 sy...
2022-04-07 09:56:48
1435
原创 恢复使用vmware自带dhcp
在server端操作一、停dhcp服务 systemctl stop dhcpd systemctl disable dhcpd二、确认是否是手工配置的IP cat /etc/sysconfig/network-scripts/ifcfg-ens32 此文件中是否是static，同时有IPADDR NETMASK GATEWAY这些参数配置在client端操作三、编辑网卡文件 vim /etc/sysconfig/network-scr...
2022-04-07 09:56:19
1930
原创 服务管理命令
启动服务 systemctl start nfs停止服务 systemctl stop nfs重启服务 systemctl restart nfsctrl + c 终止当前的进程ctrl + z 停止当前的进程并放到后台ps -efww | grep yum 找到进程IDkill -9 进程id...
2022-04-07 09:55:22
862
原创 dhcp的安装和部署
dhcp的安装和部署一、安装 yum install -y dhcp二、配置 vim /etc/dhcp/dhcpd.conf subnet 192.168.129.0 netmask 255.255.255.0 { range 192.168.129.4 192.168.129.6; option domain-name-servers 223.5.5.5; option routers 192.168.129.2;...
2022-04-06 15:52:49
1688
原创 vsftpd服务的安装和配置
# 在linux上操作一、安装 yum install -y vsftpd二、配置 vim /etc/vsftpd/vsftpd.conf listen_ipv6=NO listen=YES xferlog_file=/var/log/xferlog 三、启动服务 systemctl start vsftpd四、验证 systemctl status vsftpd netstat -ant #...
2022-04-06 15:28:12
397
原创 awk 文本分析工具
一、awk的格式要求awk [options] '/parretn/ {action} ' 文件名或者管道输入二、options常用的是什么 -F 分割符三、pattern有什么 pattern是模式匹配，/pattern/，/pattern/这个是两个模式中间的所有行都会满足要求四、action有什么 每一个action都是放在{}里面的 {}可以有多个五、内置变量 NF 域的个数 NR 记录的个数 $0 一整行六、例子 cat /e...
2022-04-06 15:27:20
57
原创 dhcp服务的安装和配置
一、安装 yum install -y dhcp net-tools二、配置 vim /etc/dhcp/dhcpd.conf subnet 192.168.129.0 netmask 255.255.255.0 { option domain-name-servers 223.5.5.5; range 192.168.129.4 192.168.129.6; option routers 192.168.129.2;}...
2022-04-06 11:46:05
2255
原创 awk 文本分析工具
一、awk的格式要求awk [options] '/parretn/ {action} ' 文件名或者管道输入二、options常用的是什么 -F 分割符三、pattern有什么 pattern是模式匹配，/pattern/，/pattern/这个是两个模式中间的所有行都会满足要求四、action有什么 每一个action都是放在{}里面的 {}可以有多个五、内置变量 NF 域的个数 NR 记录的个数 $0 一整行六、例子 cat /e...
2022-04-06 10:01:13
226
原创 vsftpd的安装和配置
一、安装 yum install -y vsftpd二、配置 vim /etc/vsftpd/vsftpd.conf listen_ipv6=NO listen=YES xferlog_file=/var/log/xferlog # 注释去掉三、启动服务 systemctl start vsftpd四、验证 systemctl status vsftpd netstat -antp # 查...
2022-04-06 09:59:51
1963
原创 sed stream editor 流编辑器
一、sed的格式要求sed 参数 ‘范围 动作’ 文件或者管道输入sed -n '2,3p' /etc/passwdsed -n '/centosplus/,/enabled/p' /etc/passwd二、sed的参数都有什么 -n 静默输出 只打印我处理的行 -f 将处理的动作或者范围写到一个文件中 -e 多点编辑 三、sed的动作都有什么 a append 追加 在找到的行下面追加 i insert 添加 在找到的行上面添加...
2022-04-05 11:46:16
441
原创 find和grep命令的常用选项
find 从哪开始找，找什么，找的关键字是什么find /etc -name "*.conf"find /etc/ -type ffind /etc/ -mtime +3find /etc/ -user rootfind /etc/ -size +1Mfind ~ -size +10Mfind . -size +10M
2022-04-04 21:56:16
73
原创 在vmware linux上添加新硬盘的步骤（PARTED）
1、在vmware上添加硬盘设备，然后reboot linux虚拟机 2、parted /dev/sdc 3、mklabel gpt 4、mkpart 5、输入数字1 6、输入文件系统xfs 7、起始 填0% 8、结束填 50% 9、quit退出 10、 mkfs.xfs /dev/sdc1 11、 mkdir /sdc1 12、 mount /dev/sdc1 /sdc1 13、 编辑/etc/f...
2022-04-04 21:55:31
620
原创 在vmware linux上添加新硬盘的步骤（MBR）
1、在vmware上添加硬盘设备，然后reboot linux虚拟机 2、fdisk /dev/sdb 3、n 创建新分区 4、p 创建主分区 5、分区号 1 2 3 4 6、起始扇区 2048 7、结束扇区 +10G 8、w 保存 9、mkfs.xfs /dev/sdb1 10、 mkdir /data/db1 11、 mount /dev/sdb1 /data/db1 12、配置随机启...
2022-04-04 21:54:59
1275
原创 安装软件的注意事项
一、为什么装httpd的时候，需要装其它包？ 因为httpd的代码里有其它软件包的使用，所以要安装其它包来支持httpd的部分功能 二、--with-apr的含义是什么？ ./configure --prefix=/usr/local/apache2 --with-apr=/usr/local/apr --with-apr-util=/usr/local/apr-util/ 三、出现了版本不兼容的问题，怎么去解决 1、尽可能的改动小一点，不要大动。 ...
2022-04-02 14:44:30
765
原创 在centos7上编译安装httpd
一、yum安装基础包 yum install -y gcc expat-devel pcre-devel二、安装aprwget https://mirrors.aliyun.com/apache/apr/apr-1.6.5.tar.gz tar zxvfapr-1.6.5.tar.gz cdapr-1.6.5./configure --prefix=/usr/local/apr mak...
2022-04-01 17:37:08
888
原创 在linux上编译安装软件
一、yum安装 1.1 使用方法 yum install httpd 1.2 yum的原理 假如现在你是需要安装httpd这个软件，然后yum会通过你给的软件包的名字到/etc/yum.repos.d/目录下的repo文件中所指定的网站里面去搜索， 如果找到你要安装的软件包名字，则下载下来，最后使用rpm -ivh 包名来安装包。称之为一键安装。 1.3 yum的优化 https://develope...
2022-04-01 17:15:28
998
原创 linux基础三
一、三种命令风格 posix - unix gun --二、用户管理 groupadd fc1 useradd -g fc1 fc1 useradd -s /bin/bash -d /home/fc1 -g fc1 -c "此处是注释" fc1 passwd fc1 usermod groupmod /etc/passwd /etc/group /etc/shadow三、...
2022-04-01 09:48:29
443
原创 linux基础二
一、配置的IP地址有什么用？ IP地址和计算机的关系不是绑定关系，一个IP地址可以应用在不同的计算机上 IP地址的配置是和具体的网络环境匹配的。二、在linux配置IP地址的方法 yum install -y net-tools vim vim /etc/sysconfig/network-scripts/ifcfg-ens32 BOOTPROTO="static" DEVICE="ens32" ONBOOT="y...
2022-03-31 16:28:03
430
原创 linux基础一
一、linux的发行版 CentOS ubuntu Redhat二、kernel内核 内核是由林纳斯开发的 其主要作用是管理CPU，内存，硬盘，而在内核的基础上，再添加一些像wget python vim curl这些应用软件，组合成了一个linux发布版本三、kernel的官方网站 https://www.kernel.org https://www.centos.org https://www.redhat.com 四、红帽和c...
2022-03-31 13:23:17
1017
原创 将flume的数据实时发送到spark streaming的部署文档
一、创建数据源文件 echo "hello world" >> /tmp/word.txt二、安装flume 参考csdn文档 https://blog.csdn.net/weixin_43859091/article/details/123635082 三、编写spark.properties文件放置在/usr/local/flume/conf/spark.properties目录中 a1.sources = r1 a1.channels ...
2022-03-28 12:39:47
2162
1
原创 在Windows上部署spark需要注意的地方
一、在Windows上部署spark 下载的spark和hadoop版本要一致，推荐使用3版本二、jdk版本 推荐jdk1.8版本 三、环境变量 SPARK_HOME HADOOP_HOME 要在path里将java.exe的目录配置好四、打开vscode from pyspark import SparkConf, SparkContext conf = SparkConf().setMaster("local").setAp...
2022-03-25 12:51:37
2670
原创 在Windows上配置spark环境
一、将spark和hadoop压缩包解压后放置在windows上的一个没有空格的英文名文件夹里二、配置环境变量HADOOP_HOMESPARK_HOME三、将spark目录下的python子目录里的pyspark复制到c:\program files\python38\lib目录中四、将钉钉群里的py文件放置在vscode执行，查看执行结果...
2022-03-23 11:51:45
3911
1
原创 linux常用命令
cd 在目录间切换cp 复制mv 移动或者重命名rm 删除ps 查看进程 ps -efww | grep flumekill 结束进程 kill -9 进程idvim 编辑文件 shift+g 最后一行 gg第一行 :123 切换到123行 n往下查找 N 往上查找free -m 查看可用内存df -h 查看可用硬盘空间top 每隔2秒查看cpu使用率...
2022-03-22 09:24:27
1171
原创 centos初始化
# 安装软件包yum install -y vim net-tools curl wget epel-release lrzsz# 关闭selinuxsed -i '/SELINUX/s/enforcing/disabled/' /etc/selinux/config# 关闭防火墙、Networkmanager、postfixsystemctl stop firewalldsystemctl stop NetworkManagersystemctl disable firewalldsy
2022-03-21 16:55:37
317
原创 hbase安装步骤
一、HDFS 启动 /usr/local/hadoop/sbin/start-all.sh二、zookeeper要启动 1、使用hbase自带的zookeeper 2、使用独立的zookeeper三、安装hbase 1、启动zookeeper集群 2、将钉钉群里的hbase-2.4.10-bin.tar.gz文件下载到windows机器上 3、将windows上的hbase-2.4.10-bin.tar.gz通过xftp工具上传到三台虚拟机中一台lin...
2022-03-21 16:54:56
1808
原创 hbase安装步骤-适用于zookeeper集群版
一、启动三台虚拟机的其中一台Hadoop /usr/local/hadoop3/sbin/start-all.sh二、启动三台虚拟机的所有zookeeper /usr/local/zookeeper3/bin/zkServer.sh start /usr/local/zookeeper3/bin/zkServer.sh status查看状态 成功的标志是一个leader 两个follwer三、下载钉钉群里的hbase-2.4.10-bin.tar.gz文件到wi...
2022-03-21 16:54:14
272
原创 zookeeper集群配置细节
一、让三台Linux互相通信的步骤 1、将三台Linux的网络模式全部选择NAT 2、在windows上运行ipconfig，找到vmnet8这个网卡的IP网段 3、在依次登录三台虚拟机，将vi /etc/sysconfig/network-scripts/ifcfg-ens32 4、将三台linux的网络全部重启一下 systemctl restart network 5、在任意一台linux上，ping 192.168.30.128二、部署zookeeper 1...
2022-03-21 16:53:34
609
原创 zookeeper安装
一、下载zookeeper 将钉钉群里的压缩包下载到windows机器上二、上传到linux上 xftp工具三、解压 tar zxvf apache-zookeeper-3.8.0-bin.tar.gz四、移动 mv /root/apache-zookeeper-3.8.0-bin /usr/local/zookeeper3五、新建zoo.cfg文件 cd /usr/local/zookeeper3/conf/ cp zoo_sample.cf...
2022-03-21 16:52:39
840
原创 sqoop安装文档
一、下载钉钉群里的sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz压缩包到windows上二、 通过xftp工具上传到linux上三、解压sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz文件 cd /root tar zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz mv /root/sqoop-1.4.7.bin__hadoop /usr/local/sqoop 四、配置 c...
2022-03-21 16:51:53
771
原创 CentOS7常用配置
1、查看主机名hostname2、resourcemanager启动失败可能的错误vim /usr/local/hadoop3/etc/hadoop/yarn-site.xml 将www改成你自己的主机名或者ip地址3、安装常用软件包yum install -y vim wget lrzsz net-tools4、如果报了错，看不出来是哪的错误 jps一共是需要8个进程 ...
2022-03-21 16:50:31
723
原创 配置centos7的网络
一、切换到network-scripts目录cd /etc/sysconfig/network-scripts二、编辑ifcfg-ens33文件vi ifcfg-ens33DEVICE="ens33"ONBOOT="yes"IPADDR="192.168.30.126"PREFIX="24"GATEWAY="192.168.30.2"DNS1="223.5.5.5"DNS2="223.6.6.6" BOOTPROTO="static...
2022-03-21 14:51:25
933
4
原创 在centos7上安装flume
一、flume的官方网站 https://flume.apache.org二、下载flume https://mirrors.tuna.tsinghua.edu.cn/apache/flume/1.9.0/apache-flume-1.9.0-bin.tar.gz三、通过xftp工具传到linux的/root目录四、解压 cd /root tar zxvf apache-flume-1.9.0-bin.tar.gz mv apache-flume-1.9....
2022-03-21 14:37:44
4981
9
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人