「已注销」-CSDN博客

原创 hadoop flume 监听hive日志文件的常见错误 flume链接HDFS失败之端口问题

21 五月 2022 17:08:53,228 INFO [SinkRunner-PollingRunner-DefaultSinkProcessor] (org.apache.flume.sink.hdfs.BucketWriter.open:246) - Creating hdfs://hadoop102:9870/flume/20220521/17/logs-.1653124088090.tmp21 五月 2022 17:08:53,249 WARN [hdfs-k2-call-runn...

2022-05-21 17:50:31 818

原创线程5226

import requestsfrom lxml import etreeheaders = {"User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.130 Safari/537.36"}from time import sleepimport geventimport queueuse_in = input("请输入关键词：.

2022-05-19 10:18:49 143

原创非正常启动HIVE出现的RunJar进程

在关闭集群的是时候出现RunJar进程[root@hadoop102 zookeeper-3.5.7]# jps6596 Jps3701 RunJar3960 RunJar3499 RunJar查看状态[root@hadoop102 zookeeper-3.5.7]# ps -ef | grep RunJarroot 3499 1476 0 17:01 pts/0 00:00:14 /opt/module/jdk1.8.0_212/bin/java .

2022-05-11 21:52:22 2536 1

原创计算机组成原理第三章系统总线习题

3.1什么是总线?总线传输有何特点?为了减轻总线的负载,总线上的部件都应具备什么特点?①总线是连接多个部件的信息传输线,是个部件共享的传输介质。②总线传输特点:在某一时刻,只允许有一个部件向总线发送信息,而多个部件可以同时从总线上接受相同的信息。③为减轻总线上的负载,各种I/O设备要通过I/O接口接在总线上,而且还要通过三态门挂在总线上,没有数据交换时置成高阻态3.2总线如何分类?什么是系统总线?系统总线又分为几类,它们各有何作用,是单向的,还是双向的,它们与机器字长、...

2022-05-11 21:49:45 3349

原创计算机组成原理第一章计算机系统概论

1.1什么是计算机系统、计算机硬件和计算机软件?硬件和软件哪个更要?计算机系统:由计算机硬件系统和软件系统组成的综合体。计算机硬件:指计算机中的电子线路和物理装置。计算机软件:计算机运行所需的程序及相关资料。硬件和软件在计算机系统中相互依存,缺一不可,因此同样重要。1.2如何理解计算机系统的层次结构?计算机系统的层次结构来看,它通常可有五个以上的不同级组成,每一个上都能进行程序设计。由下至上可排序为:第一级微程序机器级,微指令由硬件直...

2022-05-11 20:40:19 322

原创 Linux解压Mysql报错：警告：mysql-community-libs-5.7.28-1.el7.x86_64.rpm: 头V3 DSA/SHA1 Signature, 密钥 ID 5072e1

在安装目录下执行rpm安装时报错：[root@hadoop102 software]# rpm -ivh mysql-community-libs-5.7.28-1.el7.x86_64.rpm警告：mysql-community-libs-5.7.28-1.el7.x86_64.rpm: 头V3 DSA/SHA1 Signature, 密钥 ID 5072e1f5: NOKEY错误：依赖检测失败： mysql-community-common(x86-64) >= 5.7.9 被 mys

2022-05-10 11:12:49 4612 1

原创 HADOOP集群shell脚本分享

分发文件脚本！！#!/bin/bash#1. 判断参数个数if [ $# -lt 1 ]then echo Not Enough Arguement! exit;fi#2. 遍历集群所有机器for host in hadoop102 hadoop103 hadoop104do echo ==================== $host ==================== #3. 遍历所有目录，挨个发送 for file in $@ do #

2022-05-06 21:57:43 98

原创 HADOO_HA启动时ERROR Attempting to operate on hdfs namenode as root

[root@hadoop10 hadoop-3.1.3]# sbin/start-dfs.sh Starting namenodes on [hadoop10]ERROR: Attempting to operate on hdfs namenode as rootERROR: but there is no HDFS_NAMENODE_USER defined. Aborting operation.Starting datanodesERROR: Attempting to operate .

2022-05-06 21:47:27 807

qq_44641456的博客