自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(8)
  • 收藏
  • 关注

原创 Linux虚拟机中一些简单有用的脚本

一定要注意:此脚本文件,不要在windows进行编辑,否则会报错,全程使用linux进行编辑,原因是windows中的字符集和linux中的不一样。最常用的选项,表示递归模式,保留软链接、文件权限、修改时间戳、属主、属组、设备文件、特殊文件,详细显示执行过程。echo "--------jps-cluster.sh脚本执行完成!如果我们想在 node01 这台电脑上,查看整个集群的服务启动情况,可以使用这个脚本文件。除非写全路径:xcall.sh /opt/installs/jdk/bin/jps。

2025-05-20 20:52:20 497

原创 Hive 部署实战:从本地模式到远程集群的全流程解析

目录本地模式部署Hive远程模式部署配置环境变量:vi /etc/profile.d/custom_env.sh 配置hive-env.sh进入这个文件夹下:/opt/installs/hive/confcp hive-env.sh.template hive-env.sh 给hdfs创建文件夹: 使用本地模式的最大特点是:将元数据从derby数据库,变为mysql数据库,并且支持多窗口同时使用。 第一步:检查你的mysql是否正常(若是还未安装MySQL,可以去我主页查看以前的博客,有安装教程) 第二

2025-05-20 20:45:06 802

原创 HDFS伪分布部署

- 注意: hadoop1.x时代默认端⼝9000 hadoop2.x时代默认端⼝8020 hadoop3.x时 代默认端⼝ 9820 -->参考守护进程布局 -->systemctl stop firewalld 关闭防火墙,但是开机后,防火墙还是会开启。参考守护进程布局 -->mkdir -p /opt/installs --以后存放解压后的软件。-- hdfs的基础路径,被其他属性所依赖的⼀个基础路径 -->mkdir -p /opt/modules --以后存放安装包。

2025-05-12 19:58:08 953

原创 Linux系统中的 sed操作(非常重要)

sed 可选项 目标文件对目标文件 进行或pprint打印代表 最后一行-n仅显示处理后的结果-eexpression根据表达式 进行处理案例:搞一些数据 6.txtbbb helloccc rteee rttggg rttt列出6.txt中的3~5行的数据:假如没有学过sed可以这么干:显示第一行到最后1行的数据:显示第二行到最后一行。

2025-05-10 14:27:53 710

原创 shell脚本命令中的awk(很重要)

root@bigdata01 scripts]# awk -F ' ' 'BEGIN{print "开始计算成绩:"}{total=total+$4}END{print "总成绩 是:"total",总条数是:"NR}' 4.txt。cat 4.txt | awk -F ' ' 'BEGIN{print "开始计算成绩总和"}{total=total+$4}END{print total,NR,(total/NR)}'awk -F ',' '{print $1,$2, $3}' 文件。

2025-05-10 14:12:34 875

原创 Linux中的常见shell命令(超详细)

脚本后缀sh 和 后缀bash 是一回事,sh 是 bash 的软链接,也就是这两个是一回事所谓的脚本就是将我们经常使用的linux命令汇总在一个文件中而已。

2025-05-10 08:43:53 989

原创 Linux中的常见命令总结(详细完整)

可以通过enter键,继续往后查看,继续往后查看,每次查看一行数据,点击space键,每次查看一页数据如果不想看了,可以输入 q。可以通过enter键,继续往后查看,每次查看一行数据,点击space键,每次查看一页数据,如果不想看了,可以输入 q。tail -f /etc/services 滚动查看某个文件(一般该文件是日志文件,不断的有内容往里面写入)不要尝试,在没配置Linux系统的回收站时,千万别试,下边这条命令是把系统中所有文件全部删除(删库跑路专用)

2025-05-09 19:52:33 924

原创 在Linux系统虚拟机Centos7中安装MySQL8.0

4.解压压缩包 tar -xvf mysql-8.0.26-1.el7.x86_64.rpm-bundle.tar。删除命令:rpm -e mariadb-libs-5.5.56-2.el7.x86_64 --nodeps。5.查看是否有MySQL数据库 rpm -qa | grep MySQL。

2025-05-07 20:54:01 698

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除