![](https://img-blog.csdnimg.cn/fd46f04b0009408f88c1272db8b5f71c.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
虚拟机C/U/win的配置与相关应用软件的操作
文章平均质量分 86
此专栏包含在centos和Ubuntu虚拟机上面对Hadoop以及spark还有jdk,mysql以及一些配置出现问题总结与归纳。以及对于Windows不同版本的介绍与安装。
张小鱼༒
一个浑水摸鱼的小鱼博主,博文更新看时间,有时间就写博文,没有时间就更新的慢,但是都是我认真写出来的博文,喜欢我的博文,可以交流支持奥
展开
-
分布式集群——jdk配置与zookeeper环境搭建
本文主要介绍分布式集群搭建,jdk配置以及zookeeper环境配置,以及相关的zookeeper客户端常见的命令介绍,与zookeeper的JavaAPI操作。以下的案例仅供参考。一个开源的分布式协调服务框架,它是集群的管理者。常用用途:它是集群的管理者,监视着集群中各个节点的状态根据节点提交的反馈进行下一步合理操作。通供了新增、删除、修改、监听等等功能ZooKeeper具有高可用性的原因。原创 2023-08-30 18:23:13 · 3146 阅读 · 0 评论 -
分布式集群——搭建Hadoop环境以及相关的Hadoop介绍
本文主要介绍hadoop的相关概念以及在Linux上面配置Hadoop的具体操作。镜像文件实际是存放的目录结构、文件属性等相关信息,是NameNode中关于 元数据的镜像。它是在NameNode启动时对整个文件系统的快照。edits:编辑日志文件,记录对文件或者目录的修改信息,比如删除目录,修改文件等信 息。编辑日志一般命名规则是“edits_*”,它在NameNode启动后,记录对文件系统的改动 序列。原创 2023-08-31 00:00:00 · 2556 阅读 · 3 评论 -
spark相关理论
Spark是由Apache软件基金会开发的一个大数据处理框架。它提供了高效的数据处理引擎和丰富的API,支持分布式数据处理和分布式计算,可以处理大规模数据集,具有高容错性和高性能。Spark支持多种数据处理模式,包括批处理、流处理、机器学习和图处理等。同时,Spark还提供了丰富的生态系统,包括Spark SQL、Spark Streaming、Spark MLlib、Spark GraphX等组件,方便用户进行数据处理和分析。原创 2023-06-09 00:15:00 · 281 阅读 · 0 评论 -
hive实战案例讲解
本文主要介绍hive的一个案例实战,以及相关hive语句的书写,案例仅供参考原创 2023-06-01 17:48:48 · 909 阅读 · 0 评论 -
查看MySQL服务器是否启用了SSL连接,并且查看ssl证书是否存在
查看MySQL服务器是否启用了SSL连接,并且查看ssl证书是否存在原创 2023-05-31 06:00:00 · 6558 阅读 · 0 评论 -
centos安装KVM
本篇主要介绍centos安装KVM的具体步骤以及出现问题的解决思路原创 2023-05-30 06:00:00 · 3630 阅读 · 4 评论 -
打开复制过去的virtualbox文件之后,在打开时出现只有logs文件的解决方法
打开复制过去的virtualbox文件之后,在打开时出现只有logs文件的解决方法原创 2023-05-30 06:00:00 · 1017 阅读 · 0 评论 -
hadoop零碎知识点总结
本文主要介绍hadoop配置当中的一些零碎点总结,Windows与virtual box虚拟机之间实现文本复制的设置,配置完对应Linux的hadoop软件包之后的path环境说明,使用mkdir与mkdir -p 的不同之处,gedit与vim的区别原创 2023-05-20 00:57:32 · 1049 阅读 · 1 评论 -
hive进阶——在centos7里面配置mysql,将原来hive的客户端扩展
本文主要介绍在centos7配置mysql到hive的具体步骤,原创 2023-04-27 10:29:11 · 502 阅读 · 0 评论 -
centos集群上安装hive客户端的操作步骤以及hive介绍
本文主要介绍hive的基本概念以及hive客户端在centos7集群模式下的安装与部分出问题地方的解决方法。1) hive 简介Hive:由Facebook 开源用于解决海量结构化日志的数据统计工具。Hive 是基于Hadoop 的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL 查询功能。2) Hive 本质:将HQL 转化成MapReduce 程序(1)Hive 处理的数据存储在HDFS(2)Hive 分析数据底层的实现是MapReduce。原创 2023-04-25 18:23:07 · 1397 阅读 · 0 评论 -
HBase进阶——文件的合并、 MemStore Flush、StoreFile Compaction、 Region Split、高可用与预分区介绍
本文主要介绍HBase如何进行分区与数据处理等等操作,在 HBase 中 HMaster 负责监控 HRegionServer 的生命周期,均衡 RegionServer 的负载,如果 HMaster 挂掉了,那么整个 HBase 集群将陷入不健康的状态,并且此时的工作状态并不会维持太久。所以 HBase 支持对 HMaster 的高可用配置。每一个 region 维护着 StartRow 与 EndRow,如果加入的数据符合某个 Region 维护的RowKey 范围,则该数据交给这个 Reg原创 2023-04-24 11:50:19 · 1250 阅读 · 1 评论 -
hbase进阶操作——读流程与写流程介绍
本文主要介绍hbase的写和读流程,以及zookeeper在客户端查看hbase的meta内容。本文案例仅供参考。flash +表即可以将hbase的内容写入,不写入数据还是在内存当中以上就是hbase的进阶内容,如有问题、建议,请您在评论区留言💬哦。原创 2023-04-18 16:15:51 · 831 阅读 · 0 评论 -
centos7虚拟机下hbase的使用案例讲解
本文主要介绍HBase shell的基本操作,主要是关于表的操作,包括创建、增加、删除、查找等基本操作,希望对于初学者的那么有所帮助。下面的案例仅供参考。下面开始今天的内容。以上就是今天的内容,主要介绍HBase shell的基本操作,也欢迎各位小伙伴留言交流奥~原创 2023-04-15 23:19:11 · 1269 阅读 · 0 评论 -
ubuntu虚拟机下搭建zookeeper集群,安装jdk压缩包,搭建Hadoop集群与spark集群的搭建【下篇】
ubuntu虚拟机下搭建zookeeper集群,安装jdk压缩包,搭建Hadoop集群与spark集群的搭建原创 2023-04-14 22:25:18 · 574 阅读 · 0 评论 -
ubuntu虚拟机下搭建zookeeper集群,安装jdk压缩包,搭建Hadoop集群与spark集群的搭建【上篇】
本文主要介绍在ubuntu虚拟机下搭建zookeeper集群,安装jdk压缩包。由于篇幅有限,集群配置Hadoop和spark将在下一小节介绍。原创 2023-04-14 21:37:41 · 1879 阅读 · 0 评论 -
centos7虚拟机在集群zookeeper上面配置hbase的具体操作步骤
1.1HBase定义HBase是一种分布式、可扩展、支持海量数据存储的NoSQL数据库。本文主要介绍centos7虚拟机在集群zookeeper上面配置hbase的具体操作步骤原创 2023-04-11 07:30:00 · 930 阅读 · 0 评论 -
centos7虚拟机配置集群时间同步的操作步骤
本文主要介绍centos7虚拟机里面配置集群时间同步的操作步骤。时间同步的方式:找一个机器,作为时间服务器,所有的机器与这台集群时间进行定时的同步,比如,每隔十分钟,同步一次时间。原创 2023-04-10 22:34:59 · 1409 阅读 · 4 评论 -
centos7配置zookeeper本地模式与集群模式的详细教程
主要介绍zookeeper的本地模式于集群模式的配置,包含集群启动于关闭脚本,以下为配置步骤。原创 2023-04-05 13:42:55 · 1738 阅读 · 0 评论 -
卸载centos7自带的jdk的操作步骤
本文主要介绍centos7卸载自带的jdk包,配置自己要安装版本的jdk时需要先删除原来的jdk避免冲突。原创 2023-04-04 23:31:07 · 4355 阅读 · 0 评论 -
Windows配置虚拟网络
用VPN+NAT再结合路由可以实现很方便的代理功能,适用于有一台能方便连接Internet的电脑,其他不在同一子网内的电脑能够连接到这台机器但不能完全访问Internet。本文主要介绍在Windows server 2003和Windows xp 虚拟机搭建VPN的方法原创 2023-04-03 18:05:18 · 1389 阅读 · 0 评论 -
虚拟机VMware里面安装Windows sever 2003版本详细教程
本文主要介绍如何在虚拟机里面安装Windows server 2003版本,以下为详细介绍以上就是今天要讲的内容,本文主要介绍了在虚拟机当中安装Windows server 2003的详细步骤,希望对初学者的你有所帮助。如有问题、建议,请您在评论区留言💬哦。原创 2023-04-02 21:28:57 · 12770 阅读 · 14 评论 -
Windows xp 在VMware虚拟机上面安装的详细步骤
本文主要介绍在虚拟机上面安装Windows xp家庭版的操作,附带安装镜像文件与产品密钥以上就是今天要讲的内容,本文主要介绍了在虚拟机当中安装Windowsxp的详细步骤,希望对初学者的你有所帮助。如有问题、建议,请您在评论区留言💬哦。原创 2023-04-02 17:35:10 · 14839 阅读 · 12 评论 -
虚拟机centos7配置Hadoop单节点伪分布配置教程
本文主要介绍centos7配置Hadoop单节点伪分布式配置的步骤,以下是配置过程演示!!!文档说明:后期的命令前面的#不包含在命令当中,命令是#后面的!!!Hadoop三大发行版本:Apache、Cloudera、Hortonworks。Apache版本最原始(最基础)的版本,对于入门学习最好。Cloudera在大型互联网企业中用的较多。Hortonworks文档较好。如有问题、建议,请您在评论区留言💬哦。原创 2023-03-27 16:35:13 · 1842 阅读 · 0 评论 -
centos7克隆虚拟机完成后的的一些配置介绍
本篇主要介绍centos7里面配置Hadoop环境的过程【以及可能遇到的问题,以及解决方法】提示:以下是本篇文章正文内容,下面案例可供参考例如:以上就是今天要讲的内容,本文仅仅简单介绍了pandas的使用,而pandas提供了大量能使我们快速便捷地处理数据的函数和方法。原创 2023-03-14 23:07:07 · 782 阅读 · 0 评论 -
hosts文件修改完成之后无法保存的解决方法
Hosts文件是系统中的重要文件,它能屏蔽网站、帮助计算机加速域名解析、方便用户使用等,具有很多实用功能。初学者很难在Hosts文件里面实现保存文件。提示:以下是本篇文章正文内容,下面步骤以供参考例如:以上就是今天要讲的内容,本文仅仅简单介绍了pandas的使用,而pandas提供了大量能使我们快速便捷地处理数据的函数和方法。原创 2023-03-14 21:29:13 · 3119 阅读 · 0 评论 -
在vmbox里面安装Ubuntu16.04并且配置jdk以及Hadoop配置的教程【附带操作步骤】
Hadoop升级命令 sudo apt-get update报错问题,_张小鱼༒的博客-CSDN博客Hadoop与主机连接以及20版本的Hadoop配置网络的问题_hadoop未指定主机host网卡_张小鱼༒的博客-CSDN博客Hadoop升级update命令被锁定的解决方法_hadoop锁定符号怎么去掉_张小鱼༒的博客-CSDN博客目录系列文章目录文章目录前言一、安装Ubuntu16.04步骤二、对虚拟机的网络以及相关主机映射的配置2.1、查看WLAN的对应网络IP2.2、进入etc的network目录下原创 2023-03-23 17:49:27 · 751 阅读 · 0 评论 -
虚拟机vmware下安装Ubuntu16.04修改屏幕尺寸与更新源,以及对应的安装vim和vim常见的操作命令
学习Linux时经常需要我们在自己的主机里面安装VMware虚拟机,用来学习使用,下面是小编安装Ubuntu16.04,修改屏幕尺寸与更新源,以及对应的安装vim和vim常见的操作命令。以上就是今天要讲的内容,本文仅仅简单介绍了在VMware里面安装Ubuntu的基本步骤,以及对应的更新源与vim的一些基本操作,希望对初学者的你有所帮助。如有问题、建议,请您在评论区留言💬哦。原创 2023-04-02 17:44:19 · 2603 阅读 · 0 评论 -
centos7配置静态网络常见问题归纳
随着虚拟机的普遍使用,伴随而来的是许多问题,下面是小编在VMware配置centos7时遇见的一些问题归纳与整理提示:以下是本篇文章正文内容,下面案例可供参考1、centos安装完成,但是centos的网络未修改未nat模式解决方法:打开虚拟机的虚拟网络编辑器,找到网络的nat模式。选择更改设置选择vnet8的桥接模式更改设置就可以了。除了上述的方法外,有时候可能需要我们还原一下网络配置。【这种就比较简单粗暴】2、另外一种可能时虚拟机上面可能没有开启我们对应的网络,就会出错。原创 2023-03-01 20:28:57 · 1158 阅读 · 0 评论 -
Hadoop升级命令 sudo apt-get update报错问题,
虽然要修改上面的源,但是我找不到我的修改的地方,这种方法也只能作罢。如果有知道解决方法的朋友,可以@我一下。更新文件添加DNS=8.8.8.8。还是不能完成更新操作。原创 2022-12-13 19:04:52 · 752 阅读 · 1 评论 -
Hadoop与主机连接以及20版本的Hadoop配置网络的问题
目录配置Hadoop的网络:主机与Hadoop连接出错Ubuntu20版本的网络配置在netplan里面官方网站:Canonical Netplan查看了这位博主的文章进行网络的配置ping百度网站:【可以ping通】可以ping通网络之后,但是出现了新的问题问题描述——前面我创建过多次的Hadoop虚拟机,导致主机ssh连接时报错,不能连接Hadoop,出现下面这种样子,原创 2022-12-05 22:53:06 · 930 阅读 · 0 评论 -
Hadoop升级update命令被锁定的解决方法
Hadoop升级命令升级出错的解决方法原创 2022-12-02 19:28:55 · 564 阅读 · 0 评论 -
spark里面配置jdk后的编程与Hadoop配置
编写Java程序段时要注意public定义的class类要和你定义的class文件一致。解决方法:修改property的对应括号,前面我忘记加了。修改名字,就可以解决了,查看Java程序你不能正常运行。出现这种情况就要vim进去刚才你写的java文件,二、在配置Hadoop伪分布式时出现的问题。原因大多数是因为防火墙的问题。一、编写一个简单的编程。这个是正常登陆的情况。原创 2022-12-02 19:23:36 · 530 阅读 · 0 评论