2020年08月_卡拉没

原创 vmware安装Centos7.7报错：can‘t read superblock

最近vmware安装Centos7.7碰到一个很少见的错误，估计没人有机会遇到我这样的错误，选择了安装以后报这样的错：mount: /dev/mapper/live-rw: can’t read superblock实际上这个报错没有任何意义，只是我的iso包不完整，在centos7.7系统里安装了vmware，然后又使用vmware安装centos7.7，选择了本地的centos7.7iso镜像，但是这镜像在上传的时候没有上传完，本来是这个镜像是这样的-rw-r–r--. 1 root ro

2020-08-26 14:02:33 5665 5

原创 kubernets的nodeport无法telnet通Expected to load root CA config from

kubernetes集群重启以后，我在启动dashboard的时候，各种查看看起来都没有问题，但就是没法登陆dashboard页面，也没有什么明显的报错，网上搜多数说是因为kubernetes的默认证书不包括dashboard的证书，要创建一个，但是我创建的时候明明有相应的证书，最后才发现是犯了个低级错误，没有启动kube-proxy服务，集群各个方面都看起来正常，也能启动pod，容器IP也能ping通，只是提供服务的端口无法telnet通，我这个情况是特例，应该没有人会犯我这样的错误吧，我这里列出来给大家

2020-08-07 17:22:42 288

原创 CDH提交任务报错

Requested user hbase is not whitelisted and has id 480,which is below the minimum allowed 1000这是cloudera的默认配置，修改cloudera关于这个项的配置YARN -> Node Manager Group -> Security -> Minimum User ID默认是1000，改为0即可...

2020-08-07 12:02:52 464

原创启动cloudera-scm-server报错InnoDb engine isn‘t present or enabled. SCM requires InnoDb MySQL db engine.

2019-03-26 10:11:36,214 ERROR main:com.cloudera.enterprise.dbutil.DbUtil: InnoDB engine not found. Show engines reported: [MRG_MYISAM, CSV, MyISAM, MEMORY]2019-03-26 10:11:36,214 ERROR main:com.cloudera.server.cmf.bootstrap.EntityManagerFactoryBean: InnoD

2020-08-07 11:57:11 154

原创 kafka经典报错：broker.id doesn‘t match stored broker.id

启动kafka时经常会报错，尤其是在kafka重装以后会有broker.id不匹配的问题Fatal error during KafkaServerStartable startup. Prepare to shutdownkafka.common.InconsistentBrokerIdException: Configured broker.id 129 doesn’t match stored broker.id 124 in meta.properties. If you moved your

2020-08-07 11:54:55 1103

原创 oracle报错ORA-01034: ORACLE not available

SQL> shutdown immediate;ORA-01034: ORACLE not availableORA-27101: shared memory realm does not existLinux-x86_64 Error: 2: No such file or directory关闭oracle实例时出现这种报错，是没有指明实例名的结果两种解决方法：1.在系统中指定ORACLE_SID的环境变量，如下：export ORACLE_SID=orcl2.登陆字符串中加入相应

2020-08-07 11:50:14 1475

原创 war包版jenkins安装配置

本文采用tomcat+war包的形式进行安装1.下载war包下载地址http://mirrors.jenkins.io/war-stable/latest/jenkins.war2.安装tomcat我这里8080端口被占了，所以更改tomcat默认端口修改配置文件为<Connector port=“38080” protocol=“HTTP/1.1” connectionTimeout="20000" redirectPort="8443"

2020-08-06 09:48:19 1974

原创 gitlab+jenkins+maven+docker(kubernetes)配置持续集成（流水线+脚本方式）

从零开始，一个人，从连jenkins是什么都不知道到基本完成持续集成，可以初步服务于公司的开发环境，用时大约一个月的时间，中间碰坑无数，每一个点击，每一个配置都被卡过很长时间，还好这之前对脚本还算熟悉，用脚本完成了jenkins的一些docker方面的功能，不然还需要再耗时一两周，以下是我完成的流程图（没怎么画过，不规范），希望初学者能在我这里得到一些灵感，不至于入门无路。jenkins，maven，gitlab，docker的安装以后再写持续集成流程图流程：为防止意外，使用半自动集成方式，因为研

2020-08-06 09:29:17 796

原创 linux配置本地yum源与本地html yum源

在实际生产环境中，好多都是内网环境，因此不能使用网上的yum源进行软件的安装，好多依赖环境的安装又很复杂，所以就设置一下本地yum源，如果本地有多台服务器，也可以设置一下http用来提供yum源单台服务器设置本地yum源：将iso包上传到服务器[root@linux3 sga]# ll-rw-r--r--. 1 root root 4664066048 5月 29 09:28 CentOS-7-x86_64-DVD-1908.iso将iso包挂载到系统目录[root@linux3 sga]

2020-08-05 10:59:59 214

原创 Cloudera-scm-agent启动报错ERROR Could not determine hostname or ip address； proceeding.

出现这种情况的主要原因是服务器hostname设置问题，应该是在系统安装以后修改过hostname，然后修改的有问题，又或者是你的配置文件里写的hostname和本机hostname不符（我没有遇到过），修改hostname需要修改/etc/hosts和/etc/sysconfig/network只修改其中一个是会出现迷之bug（实际是我也不知道会出什么问题）检查：/etc/hosts 中的host 与/etc/sysconfig/network中的host是否一致，以下是我的配置[root@linux

2020-08-05 09:17:19 1650

原创 linux清理缓存

先写下解决方法：只需两个命令sync #将缓存的内写入磁盘，以免数据丢失，执行时间和缓存大小有关，越大时间越长echo 3 > /proc/sys/vm/drop_caches #清理缓存linux系统在使用的过程中，经常会遇到明明系统运行只使用了几G的内存，但查看剩余内存时只有几百兆的情况，虽说这是linux对于内存使用的优化，但大多数情况下这种优化会让新程序报错内存不足，就行这种情况一样我这台服务器安装了单机版的CDH，这种情况下启动一个yarn任务，yarn任务就会由于无法获得足够的启

2020-08-05 09:08:36 336

原创 HDFS操作权限不足问题

日志：Permission denied: user=hadoop, access=WRITE,inode="/user":hdfs:supergroup:drwxr-xr-x在高版本的CDH中，hadoop已经不是最高权限的用户了，最高权限的用户是hdfs，就像linux系统中的root用户解决方法：[root@linux4 ~]# hdfs dfs –mkdir /user/hadoop[root@linux4 ~]# hdfs dfs –chown Hadoop:Hadoop /user/H

2020-08-05 08:56:28 3099

qq_37684481的博客