自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(18)
  • 收藏
  • 关注

原创 【无标题】

再进入到操作系统使用gparted图形化工具调整大小即可。总体顺序就是先使用VMWare对虚拟机进行扩展。重新挂载目录增加读写权限。

2023-09-25 13:48:22 107 1

原创 Ambari-2.7.5在麒麟V10操作系统中的集群部署(二)

查看麒麟系统的python2和python3的模块包site-packages,发现2.7的模块很少,没有yum其他的依赖也少的可怜,3.7倒是有很多,也有dnf和之前设置的软链yum。经过之前安装Ambari,yum是可以正常使用的,但仍然出现该错误,可能是因为yum模块的路径没有正确设置。,使用的是python3,这里又与Ambari的安装调用python有点出入。,注意ambari-server.py使用的是python2,所以我们的思路是给python2装一个可用的yum。

2023-07-06 17:17:00 1091 8

原创 Ambari-2.7.5在麒麟V10操作系统中的集群部署(一)

关于安装包的下载和前期服务器准备工作,可以参考另一位博主的文章:http://t.csdn.cn/Yj6Ub 第一章第一节安装包准备。MySQL数据库的安装(tar.gz包):http://t.csdn.cn/7mpJL (rpm包可以自行百度)配置/etc/ambari-server/conf/ambari.properties,添加如下行。麒麟操作系统-01-java环境说明和安装:http://t.csdn.cn/tN1ju。在主节点(安装server的节点)启动ambari-server。

2023-06-30 17:46:58 735 2

原创 麒麟操作系统-06-Kafka3.0.0安装与部署

生产者将消息发布到一个或多个数据流主题(topic),消费者可以选择订阅一个或多个主题,并接收其中的消息。在kafka2的版本中,对kafka都是强依赖。这里选用3版本,但还是依赖了zookeeper,以防未来某些特定情况下有脱离zookeeper的需求,直接切换即可,无需卸载重新安装部署。在我们大数据项目中,一定少不了Kafka,它是一种高吞吐量、分布式的消息队列系统,可以处理大量的数据流,具有高可靠性和可扩展性。类似的每台都需要单独启动的组件,我们都编辑一个脚本,利用ssh进行脚本一键启动。

2023-06-02 15:45:42 656

原创 麒麟操作系统-05-Zookeeper3.8.0安装与部署

我们用到的很多组件都需要依赖zookeeper提供的方案来实现分布式、高可用和协作等方面的需求。如:Hadoop的HA、Kafka、HBase、Storm、Cassandra等。

2023-06-02 15:25:17 482

原创 麒麟操作系统-04-Hive3.1.2安装与部署

Hive 3.1.2相对于之前的版本,在查询性能、事务能力、SQL标准支持等方面均有不小的改进和优化,是一个更加稳定、高效的版本。HADOOP_HOME替换为自己hadoop的安装目录,$HIVE_HOME替换为自己的hive安装目录,没有配置环境变量的话,不要直接复制粘贴。使用远程工具连接hive,先开启metastore,再开启hiveserver2,才能使用工具连接hive!替换过来,删除自带的低版本。

2023-06-02 15:02:19 265

原创 麒麟操作系统-03-Hadoop3.5.5安装与部署

虚拟机也可以,但是要确保运行内存是够用的,建议主节点node1给4G,其他最少2G。注意修改ip们可以参照我的另一篇博文:http://t.csdn.cn/6ohFp。下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-3.3.5/注意:以上的配置都是些简单配置,很多参数都是可以根据情况去修改的,包括端口号。清华源下载的快,点进去选择 hadoop-3.3.5.tar.gz 下载,674M的,不要选择错了。

2023-06-01 17:21:34 660

原创 麒麟操作系统-02-hosts域名映射、ssh免密等。

生产环境下,有些服务器本身就在内网中,无法连接外网,也可以关闭防火墙。但如果是可联网的服务器,要斟酌,要搞清楚是否需要防火墙开启,如果需要开启,则不能关闭防火墙,跳过此步,看第4步。另外,最好是将自己使用的电脑(window或mac),都找到hosts文件进行同样的设置,这样你在本机上访问虚拟机的时候就可以不使用ip,直接使用node1或2,3即可.如果是虚拟机的话,要在修改了每台虚拟机的固定ip之后进行设置。虚拟机一定要执行该操作,因为你防火不防火无所谓的。host、ssh免密、防火墙等工作。

2023-06-01 11:34:18 4311 2

原创 麒麟操作系统-01-java环境说明

5、经过本人自己的测试,其实自带的jdk,就够用。另外,国产麒麟系统的内核也是linux,大部分命令和软件的安装环境参考linux即可,网络上这方面的分享比较少,我们需要多琢磨。本系统自带openjdk1.8,无论是自己搭建大数据组件,还是部署CDH6,其实都是不需要更换的,亲测。4、当然我们也可以删除自带的jdk,安装我们想要安装的jdk。当然,在开始搭建之前,我们需要弄清楚,系统自带的环境是怎样的。具体的查询方法,可以自行百度,这里就不累述了。1、在全新的系统上操作的时候,先查看自带的。

2023-06-01 10:13:24 3568 1

原创 Linux中MySQL.tar.gz包的安装

我们知道,在Linux中安装MySQL的方式有两种。一种是rpm包,一种是tar.gz包。本文中详细记录tar.gz包的安装方式。以 MySQL5.7为例下载就不累述了。

2023-05-26 12:16:48 1730 3

原创 华为机试 - HJ20密码验证合格程序(JAVA)

也可以将每一步封装为方法进行调用(据说这样机试查重的时候有优势哦)这里提供一种简单的思路解答此题。

2023-04-18 20:05:46 171

原创 为什么Spark比MapReduce快?

Spark比MapReduce要快的原因是什么?spark一定比mapreduce要快吗?

2023-04-17 22:35:22 312

原创 为VMware虚拟机增加内存和磁盘(炒鸡煎蛋)

虚拟机久了,使用的软件和开启的进程越来越多。原先设置的内存和磁盘都会不够用,这里记录一下简单的扩展内存和磁盘的操作。注意:如果你的磁盘已经满了才来增加的话,要想办法删除一些没用的数据(如日志或者安装包),大概留有200M左右的空余空间,才可以操作成功。

2023-04-16 00:48:24 3292 1

原创 redis常用5种数据类型和基础操作命令及在springboot中的两种使用方式

redis常用的5种数据类型及其基础操作命令,以及在java的springboot中使用redis的两种方式。

2023-01-31 10:50:21 177

原创 MAC电脑修改Linux虚拟机的固定IP地址

我们在使用Linux虚拟机的时候,常常使用FinalShell进行连接。但是会发现,Linux的ip地址随着关机开机会有这样的事情发生:昨天还是呢,今天怎么就.131了呢?这里我们要解决这个问题,就需要设置一个固定IP吧!一劳永逸。

2023-01-30 15:31:48 694

原创 黑马瑞吉外卖用户端顾客手机端页面展示

接上两个文章。

2023-01-21 14:45:49 474

原创 瑞吉外卖项目中手机短信验证登录的问题及过程处理

本篇接上一篇文章:《基于SpringBoot+MybatisPlus开发的外卖管理项目》戳戳戳 http://t.csdn.cn/cRJYY因为要实现真正的手机验证码登陆,需要上阿里云或者其他云购买相关的短信服务。对于学习期的我们来说可能很难做到。所以关于实现真实的发送短信验证的步骤,朋友们可以看视频跟着操作,这里就不再多说啦~所以我们这里在需要发送短信时,使用Slf4j日志打印的方法,模拟手机收到短信。再进行登陆验证即可。

2023-01-18 20:46:40 2928 9

原创 基于SpringBoot+MybatisPlus开发的外卖管理项目

学习完SpringBoot后跟的第一个小项目,目前正在学习中,还没有完全学完。做一些笔记,便日后翻看。

2023-01-16 19:42:06 460 2

PD Runner.dmg Parallel虚拟机辅助工具

PD Runner.dmg Parallel虚拟机无限期。下载官方Parallel17之后,运行该runner,即可无限期。

2023-08-03

AxureRP-Setup-3727.dmg ARP原型设计工具mac m1可用

产品经理必备。AxureRP-Setup-3727.dmg,ARP原型设计工具,谁用谁知道。亲测mac intel芯片和M1/M1pro芯片可用。直接安装使用即可。

2023-08-03

openssl101e,解决依赖问题

安装cdh的过程中检测缺少一些依赖,但是有时候yum源无法直接获取。

2023-06-01

mac m1pro java jdk8 zulu8

mac的m1pro芯片(mac silicon)java开发环境搭建。 jdk8,openjdk的zulu8,安装之后无需配置环境变量,即可直接使用。 经测试在m1芯片以及arm架构的linux虚拟机中(aarch64)都可以完美使用。

2023-04-17

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除