hadoop
Call me 程序员
一个菜比,还需努力!
展开
-
CentOS6.8配置Hadoop需要的启动脚本、分发脚本等内容(全)
1. 分发脚本: xsync#!/bin/bash#1 获取输入参数个数,如果没有参数,直接退出pcount=$#if((pcount==0)); thenecho no args;exit;fi#2 获取文件名称p1=$1fname=`basename $p1`echo fname=$fname#3 获取上级目录到绝对路径pdir=`cd -P $(dirname $p1); pwd`echo pdir=$pdir#4 获取当前用户名称user=`whoami`原创 2021-06-11 18:05:36 · 421 阅读 · 2 评论 -
CentOS6.8初始配置(3个文件)
初始化CentOS6.8需要配置静态IP,主机名等内容,需要配置以下3个文件内容:1. 在这里修改网卡的名称:eth0和网卡的物理地址sudo vi /etc/udev/rules.d/70-persistent-net.rules2. 在这里修改静态IP,主要修改以下内容:sudo vi /etc/sysconfig/network-scripts/ifcfg-eth0# 网卡名称DEVICE=eth0 TYPE=EthernetUUID=d765df35-c054-43c8-ba原创 2021-06-11 17:54:47 · 223 阅读 · 0 评论 -
hadoop集群启动之后safe mode is on问题解决_2020-09-16
问题描述当启动hadoop集群的时候,没有报错,进入hadoop:50070端口也正常,但是在Summary中,安全模式提示为on。不知为何。。。。当启动hive的时候,会报错:namenode safemode is on然后看其他博客说是因为集群断电、重启等原因导致很多块文件丢失,类似于在Summary中这样的提示:Safe mode is ON. The reported blocks 0 needs additional 526 blocks to reach the threshold 0原创 2020-09-16 22:30:34 · 3002 阅读 · 1 评论