大数据
sun eclipse
这个作者很懒,什么都没留下…
展开
-
hive使用sqoop导入MySQL, mapreduce错误
hive使用sqoop导入MySQL,MySQL有自增字段id,会出现字段数目不匹配的错误 原因是 MySQL插入数据时不使用id,则需要加上字段名 insert into table(name) values (“sss”) sqoop导入类似INSERT INTO bigdata_work VALUES 不加字段名则会出现上述错误 1.插入数据时 如:insert into biao1 values(’‘null",列值1,列值2); 经过测试之后你发现这种方法不行 2.指定插入数据名 如insert原创 2020-08-21 10:17:15 · 317 阅读 · 0 评论 -
nagios配置监控datanode的个数
shell监测datanode个数返回给nagios 步骤一:新建check_datanodes.sh文件并修改权限 [root@master libexec]# vim check_datanodes.sh #!/bin/sh # set java environment export JAVA_HOME=/usr/local/src/java export JRE_HOME=/usr/local/src/java/jre export CLASSPATH=.:$CLASSPATH:$JAVA_HOM原创 2020-07-10 10:40:14 · 442 阅读 · 1 评论 -
shell切换用户再执行命令
脚本如下 #!/bin/sh su -s /bin/bash - hadoop -c 'hadoop dfsadmin -report'原创 2020-07-09 16:30:15 · 1531 阅读 · 0 评论 -
nagios配置监控HDFS的健康状态
步骤一:新建check_hdfs.sh文件并修改权限 [root@master objects]# cd /usr/local/nagios/libexec/ [root@master libexec]# vim check_hdfs.sh #!/bin/sh #set java environment export JAVA_HOME=/usr/local/src/java export JRE_HOME=/usr/local/src/java/jre export CLASSPATH=.:CLASSPA原创 2020-07-09 13:51:50 · 443 阅读 · 0 评论