大数据
俶尔乘风_御青空
以梦为码,码到成功。
展开
-
hadoop集群本地测试报错
文章目录错误描述解决办法错误描述Exception in thread “main” java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIOW i n d o w s . a c c e s s 0 ( L j a v a / l a n g / S t r i n g ; I ) Z a t o r g . a p a c h e . h a d o o p . i o . n a t i v e i o . N a原创 2021-10-20 12:43:13 · 402 阅读 · 0 评论 -
centos无法用yum一键解决办法
报错提示:Loaded plugins: fastestmirror, refresh-packagekit, securityLoading mirror speeds from cached hostfileCould not retrieve mirrorlist http://mirrorlist.centos.org/?release=6&arch=x86_64&repo=os error was14: PYCURL ERROR 6 - “Couldn’t resolve原创 2021-04-29 11:42:33 · 157 阅读 · 0 评论 -
centos6.5克隆之后的网络配置
删除原有的配置:rm -rf /etc/udev/rules.d/70-persistent-net.rules进入网络配置的命令:vi /etc/sysconfig/network-scripts/ifcfg-eth0修改主机名:vim /etc/sysconfig/network修改网络配置(按照这种内容,上面没有的部分可以删除)EVICE=eth0TYPE=EthernetONBOOT=yesNM_CONTROLLED=yesBOOTPROTO=staticIPADDR=原创 2021-04-29 11:11:01 · 155 阅读 · 0 评论 -
伪分布式hdfs的配置(个人总结)
1、首先找到HADOOP_HOME目录下(我配置的hadoop路为:/opt/module/hadoop-2.7.3/ ),然后进入etc目录下hadoo下p的的core-site.xml2、修改core-site.xml fs.defaultFS hdfs://mypc:9000hadoop.tmp.dir/opt/module/hadoop-2.7.3/data/tmp其中第一个property是指示Namenode在哪台机器以及接收客户端和DataNode的端口号,第原创 2020-11-29 09:43:16 · 456 阅读 · 0 评论 -
hadoop知识介绍(hdfs,mapreduce,hdfs本地模式的使用)
一、hadoop的安装* hadoop运行的前提是本机安装了JDK,配置JAVA_HOME环境变量* 在Hadoop中启动多个不同类型的进程 * 例如,NN,DN,RM,NM,这些进程需要通信 * 在通信时,常用主机名进行通信 * 例如,在192.168.6.100机器上的DN进程,希望访问192.168.6.104机器上的NN进程! * 需要在集群的每台机器上,需要配置集群中所有机器的host映射! * 配置: * Linux: /etc/hosts * windows:原创 2020-11-28 21:27:57 · 385 阅读 · 0 评论 -
虚拟机能上网但是ping不通主机(绝对有效,适用任何情况)
一,问题分析:出现这样的问题一般是网络适配器发生了更改,如下图所示。二、踩坑很多解决办法说这是网络防火墙的问题,但是我关闭了防火墙发现问题并没有的到解决,(关闭防火墙对电脑是挺危险的)而且每次都关闭开启防火墙未免过于繁琐,这并不是问题所在。三、解决办法1、关闭所有正在运行的虚拟机2、打来虚拟网络编辑器,如下图:3、点击更改设置‘’4、先点击还原默认设置,然后点击确定(别忘了点确定,不然相当于没有环进行还原)5、打开虚拟机进行网络验证,输入ifconfig发现网络的ip地址已经发生更原创 2020-11-26 09:46:52 · 8045 阅读 · 4 评论 -
centOS配置jdk环境
链接:https://blog.csdn.net/qq_38723394/article/details/79986704原创 2020-09-21 08:30:38 · 80 阅读 · 0 评论