大数据开发
文章平均质量分 53
萍果馅是年糕
这个作者很懒,什么都没留下…
展开
-
Zookeeper出现Error contacting service. It is probably not running问题
Zookeeper出现Error contacting service. It is probably not running问题 使用多执行同时启动三台虚拟机的zookeeper能够成功启动,但查看三台启动状态时,hadoop1出现Error contacting service. It is probably not running问题。解决:1、关闭多执行 2、使用zkServer.sh stop将三台虚拟机的zookeeper服务关闭 ...原创 2022-04-06 08:55:28 · 9438 阅读 · 2 评论 -
java.io.FileNotFoundException: (拒绝访问。)问题
问题:从hdfs中将文件下载到C盘出现拒绝访问的问题。解决:将C盘修改为D盘就可以了。原创 2022-04-04 12:36:52 · 7265 阅读 · 0 评论 -
引入了junit为什么还是用不了@Test注解
在pom.xml配置文件中配置了如下<dependency> <groupId>junit</groupId> <artifactId>junit</artifactId> <version>4.11</version> <scope>test</scope></dependency>发现无法使用@Test、@after等等原因:上述scope配置了Ju原创 2022-04-04 12:22:24 · 2175 阅读 · 1 评论 -
Hadoop配置文件( hadoop-env.sh、core-site.xml、hdfs-site.xm、mapred-site.xml、yarn-site.xml、 slaves)详解
hadoop-env.sh配置hadoop中的 hadoop-env.sh(后边很多框架配置环境都是xxx.env.sh)配置hadoop的环境变量的,一般有Java home,hadoopconfdir等这些软件、配置目录,有运行过程中使用的变量,如hadoop栈大小配置,java 运行内存大小配置等等。用工具直接打开进行配置即可;默认是已经开启的,如果前面有#,只需要去掉即可;core-site.xml配置hadoop的访问目录(配置ip主机和端口号;提供出来进行访问);修.原创 2022-03-20 17:19:18 · 13458 阅读 · 0 评论 -
hadoop集群搭建
hadoop集群搭建包括了hadoop的安装,以及hadoop的文件配置还有hadoop的节点配置,启动集群原创 2022-03-20 17:00:11 · 2642 阅读 · 0 评论 -
大数据平台集群(3个节点的搭建)
大数据平台集群(3个节点的搭建);centos虚拟机jdk安装过程;虚拟机mysql数据库安装过程原创 2022-03-14 18:27:22 · 4658 阅读 · 0 评论 -
Centos开机之后无法连网
进行虚拟机克隆之后,虚拟机能够连上网。第二天重新启动电脑之后打开虚拟机发现无法连上网络。使用ip addr命令查看。发现eno16777736: <BROADCAST,MULTICAST,UP,LOWER_UP>mtu 1500 qdisc noop state DOWN group default qlen 1000问题正常能够连上网,应该显示为eno16777736: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pf.原创 2022-03-14 18:16:32 · 1676 阅读 · 0 评论 -
centos7安装过程
首先在官网上下载好iso。我采用的VMware版本是16(采用12,14,15版本都可以)镜像:CentOS7,如果没有镜像可以在阿里云下载阿里云开源镜像站资源目录https://mirrors.aliyun.com/centos/网络连接采用NAt模式...原创 2022-03-13 08:48:25 · 374 阅读 · 0 评论 -
大数据系统集成平台的搭建中,安装centos7遇到Please make your choice from above问题
依次输入1,2,q,yes即可了输入【1】,按Enter键同意许可协议输入【2】,按Enter键阅读许可协议输入【q】 ,按Enter键退出输入【yes】 ,按Enter键确定重启之后即可进入图形登录界面原创 2022-03-12 17:53:16 · 1840 阅读 · 0 评论