- 博客(8)
- 收藏
- 关注
原创 Linux虚拟机中一些简单有用的脚本
一定要注意:此脚本文件,不要在windows进行编辑,否则会报错,全程使用linux进行编辑,原因是windows中的字符集和linux中的不一样。最常用的选项,表示递归模式,保留软链接、文件权限、修改时间戳、属主、属组、设备文件、特殊文件,详细显示执行过程。echo "--------jps-cluster.sh脚本执行完成!如果我们想在 node01 这台电脑上,查看整个集群的服务启动情况,可以使用这个脚本文件。除非写全路径:xcall.sh /opt/installs/jdk/bin/jps。
2025-05-20 20:52:20
497
原创 Hive 部署实战:从本地模式到远程集群的全流程解析
目录本地模式部署Hive远程模式部署配置环境变量:vi /etc/profile.d/custom_env.sh 配置hive-env.sh进入这个文件夹下:/opt/installs/hive/confcp hive-env.sh.template hive-env.sh 给hdfs创建文件夹: 使用本地模式的最大特点是:将元数据从derby数据库,变为mysql数据库,并且支持多窗口同时使用。 第一步:检查你的mysql是否正常(若是还未安装MySQL,可以去我主页查看以前的博客,有安装教程) 第二
2025-05-20 20:45:06
802
原创 HDFS伪分布部署
- 注意: hadoop1.x时代默认端⼝9000 hadoop2.x时代默认端⼝8020 hadoop3.x时 代默认端⼝ 9820 -->参考守护进程布局 -->systemctl stop firewalld 关闭防火墙,但是开机后,防火墙还是会开启。参考守护进程布局 -->mkdir -p /opt/installs --以后存放解压后的软件。-- hdfs的基础路径,被其他属性所依赖的⼀个基础路径 -->mkdir -p /opt/modules --以后存放安装包。
2025-05-12 19:58:08
953
原创 Linux系统中的 sed操作(非常重要)
sed 可选项 目标文件对目标文件 进行或pprint打印代表 最后一行-n仅显示处理后的结果-eexpression根据表达式 进行处理案例:搞一些数据 6.txtbbb helloccc rteee rttggg rttt列出6.txt中的3~5行的数据:假如没有学过sed可以这么干:显示第一行到最后1行的数据:显示第二行到最后一行。
2025-05-10 14:27:53
710
原创 shell脚本命令中的awk(很重要)
root@bigdata01 scripts]# awk -F ' ' 'BEGIN{print "开始计算成绩:"}{total=total+$4}END{print "总成绩 是:"total",总条数是:"NR}' 4.txt。cat 4.txt | awk -F ' ' 'BEGIN{print "开始计算成绩总和"}{total=total+$4}END{print total,NR,(total/NR)}'awk -F ',' '{print $1,$2, $3}' 文件。
2025-05-10 14:12:34
875
原创 Linux中的常见shell命令(超详细)
脚本后缀sh 和 后缀bash 是一回事,sh 是 bash 的软链接,也就是这两个是一回事所谓的脚本就是将我们经常使用的linux命令汇总在一个文件中而已。
2025-05-10 08:43:53
989
原创 Linux中的常见命令总结(详细完整)
可以通过enter键,继续往后查看,继续往后查看,每次查看一行数据,点击space键,每次查看一页数据如果不想看了,可以输入 q。可以通过enter键,继续往后查看,每次查看一行数据,点击space键,每次查看一页数据,如果不想看了,可以输入 q。tail -f /etc/services 滚动查看某个文件(一般该文件是日志文件,不断的有内容往里面写入)不要尝试,在没配置Linux系统的回收站时,千万别试,下边这条命令是把系统中所有文件全部删除(删库跑路专用)
2025-05-09 19:52:33
924
原创 在Linux系统虚拟机Centos7中安装MySQL8.0
4.解压压缩包 tar -xvf mysql-8.0.26-1.el7.x86_64.rpm-bundle.tar。删除命令:rpm -e mariadb-libs-5.5.56-2.el7.x86_64 --nodeps。5.查看是否有MySQL数据库 rpm -qa | grep MySQL。
2025-05-07 20:54:01
698
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人