- 博客(30)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 linux服务器配置网络时间服务器ntp
linux服务器时间比正常时间慢了几分钟，有点dan疼本次以同步阿里云网络时间服务器为例，且看此文1，查看是否已经安装ntp服务rpm -qa | grep ntp2，卸载旧版本ntp，如无ntp，请忽略yum -y remove ntp3，安装ntp服务yum -y install ntp4，同步阿里云公共网络时间服务器ntpdate ntp.aliyun.com5，查看时间是否同步成功date -R打完收工！本文适用所有linux服务器，无论是单机还.
2021-05-31 10:54:55
320
8
原创 linux服务器kill -9干掉服务终极版脚本
大哥的项目有个需求：那边运维写的关掉服务脚本有问题，关不死，跟大哥说kill -9搞吧，大哥说行，干吧所以本篇来个kill -9干掉服务终极脚本编写脚本vim kill9.sh#!/bin/bashpid1=$(ps -ef | grep 进程名1| awk '{print $2}')pid2=$(ps -ef | grep 进程名2| awk '{print $2}')pid3=$(ps -ef | grep 进程名3| awk '{print $2}')pid4=$(ps -e.
2021-05-30 14:44:30
554
17
原创 终极卸载PC奇安信天擎
由于工作原因，领导让安装的“流氓”软件（奇安信天擎），这个软件有多流氓呐，你想退出需要密码，想卸载也需要密码，想删除发现没权限，死活干不死它。并且你想使用个向日葵远程都用不了，着实有点气skr。有人说重装系统，这是最笨的方法，程序猿，不是装系统的，当然有的程序猿会装系统。重装系统意味着所有东西都要重新搞一遍，麻烦，浪费时间，一点意义都没有本篇终极解决方案是:（进安全模式卸载）1.进安全模式（博主是Dell本子，Shift+重启，选择疑难解答->高级选项->启动设置->重启->4
2021-05-29 04:16:07
43317
48
原创 安利：Hive初始化元数据库教程
Hive初始化元数据库这是一个大数据开发人员必会操作，下面开干！文章目录0、准备工作1、登录MySQL数据库2、MySQL创建hive数据库3、打开Hive客户端，初始化元数据仓库4、查看Hive元数据仓库中是否有库、表5、查看MySQL数据库中创建的hive数据库6、测试hive元数据仓库0、准备工作在hive-site.xml中做好jdbc配置<property> <name>javax.jdo.option.ConnectionURL</name&.
2021-05-25 16:54:11
11151
7
原创 Hive客户端启动报SLF4J: Class path contains multiple SLF4J bindings.
使用Hive客户端的时候，如果不注意细节，那么会遇到一个问题：重复打印输出SLF4J信息文章目录1、出现的问题2、根本原因3、解决方法4、查看最终效果5、PS：hive日志在哪呐？1、出现的问题[root@hadoop11 lib]# hiveSLF4J: Class path contains multiple SLF4J bindings.SLF4J: Found binding in [jar:file:/datafs/hive/lib/log4j-slf4j-impl-2.10.0..
2021-05-25 15:02:05
10499
9
原创 Linux服务器免密登录配置
多台linux服务器之间，配置免密登录用处很方便首先在hadoop11这台机子上配置主机名映射vim /etc/hosts10.10.0.11 hadoop1110.10.0.12 hadoop1210.10.0.13 hadoop13生成公钥、私钥ssh-keygen -t rsa然后一路回车分别发送公钥到3台主机ssh-copy-id hadoop11ssh-copy-id hadoop12ssh-copy-id hadoop13之后就可以免密登录了ssh hadoo.
2021-05-24 23:27:41
312
原创 华为鲲鹏920云主机部署zookeeper集群（3.6.3版本）
需求：老大要求在华为鲲鹏920云主机上部署zookeeper集群文章目录0、准备工作1、开始部署2、启动集群3、测试集群4、安利启动、关闭zk集群脚本0、准备工作版本选择apache-zookeeper-3.6.3下载zookeeperwget https://archive.apache.org/dist/zookeeper/zookeeper-3.6.3/apache-zookeeper-3.6.3-bin.tar.gz集群部署（3节点）hadoop41hado.
2021-05-24 18:30:53
562
2
原创 华为鲲鹏920云主机部署kafka集群（2.2.1版本）
需求：老大要求在华为鲲鹏920云主机上部署kafka集群当当当，文末有彩蛋文章目录0、准备工作1、开始部署2、启动集群3、测试集群a. 41创建topicb. 3台分别查看topic41生产3台消费4、安利启动、关闭kafka集群脚本0、准备工作版本选择：kafka 2.2.1规划在3台云主机上部署hadoop41hadoop42hadoop43下载安装包wget http://archive.apache.org/dist/kafka/2.2.1/kafka_2.11.
2021-05-24 17:42:05
690
4
原创 Linux服务器配置普通用户具有root权限（免密）
由于业务需求，需要对Linux服务器配置普通用户具有root权限（免密）具体做法如下：（以demo用户为例）1、先授权（可写权限）chmod u+w /etc/sudoers2、修改 /etc/sudoers 文件，找到下面一行，在 %wheel 下面添加一行：vim /etc/sudoers要修改的内容root ALL=(ALL) ALL%wheel ALL=(ALL) ALLdemo ALL=(ALL) NOPASSWD:ALL然后保存 :wq3、去掉可写权限chmod u-
2021-05-23 19:20:51
946
1
原创 解决ZooKeeper集群节点状态报错Client address: localhost. Error contacting service. It is probably not running
出现问题：启动ZK三节点集群，master节点查看状态报错，另外两个节点均正常看截图报错详情：Client port found: 2181. Client address: localhost.Error contacting service. It is probably not running.根本原因：master节点没关墙终极解决方法：解法1：通过命令进入cd /usr/local/zookeeper/data中找到zookeeper_server.pid文件，然后干
2021-05-23 19:13:31
3991
原创 schematool -dbType mysql -initSchema初始化报错Illegal character entity: expansion character (code 0x8 at
hive 初始化报错报错信息如下：[root@localhost conf]# ../bin/schematool -dbType mysql -initSchemaException in thread "main" java.lang.RuntimeException: com.ctc.wstx.exc.WstxParsingException: Illegal character entity: expansion character (code 0x8 at [row,col,syste.
2021-05-23 18:52:44
958
3
原创 kafka-manager启动方式
我是使用下面这种方式启动kafka-managernohup /opt/kafka-manager-2.0.0.0/bin/kafka-manager -Dconfig.file=/opt/kafka-manager-2.0.0.0/conf/application.conf -Dhttp.port=80 &老大说不行，这种方式不好，让我用下面这种规范的方式nohup /opt/kafka-manager-2.0.0.0/bin/kafka-manager -Dconfig.file=.
2021-05-23 18:44:51
919
1
原创 启动hadoop集群 jps 查看不到DataNode
出现问题：hadoop集群起来以后，jps查看进程，看不到DataNode根本原因：hadoop集群由原来3个节点升级到6个节点，并且更换NameNode节点解决方案：6个节点都干掉 /datafs/hadoop/dfs/data/current重启hadoop集群即可值得注意的地方：升级集群，应该先停掉集群，然后干掉之前的dfs data数据然后再启动集群...
2021-05-23 18:32:28
451
原创 解决Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
老大让启动一下hive，结果报错了，想办法解决，经过不懈努力，终于搞定了hive> show databases;FAILED: HiveException java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClienthive>出现这个问题的原因：在 hive-site.xml文件中配置了三个参数所引起的hive.tx
2021-05-23 18:21:20
6953
原创 Linux服务器之 telnet 测端口
老大让用 telnet 测一下端口使用能用，但是发现telnet用不了，所以就需要安装了yum -y install telnet安装后，测试端口telnet ip port示例：telnet localhost 8080另外，测端口方法不止 telnet 一种可以使用 netstat示例：netstat -antp | grep 8080...
2021-05-23 17:32:34
1027
原创 bash: jps: commond not found... Linux服务器使用 jps 报错
老大说服务器使用jps的时候用不了，还报错bash: jps: commond not found...根本原因：缺少Java开发环境解决方法：yum -y install java-1.8.0-openjdk-devel
2021-05-23 17:27:05
179
原创 Linux环境变量配置总结
Linux环境变量配置说明可在多个文件中配置/etc/profile.d/*.sh/etc/profile~/.bashrcbash运行模式分为login shell和no-login shelllogin shell启动时会加载 /etc/profileno-login shell启动时会加载 ~/.bashrc其实加载 ~/.bashrc 或 /etc/profile 时，都会加载 /etc/profile.d/*.sh推荐在 /etc/profile.d/*.sh 目录下
2021-05-23 16:32:03
1043
5
原创 华为泰山鲲鹏920云主机磁盘扩容脚本
需求：有10台华为鲲鹏920云主机都需要加挂磁盘，所以非常需要脚本自动化进行操作之前博主写过关于物理硬盘、云硬盘等磁盘扩容的文章（如下：）PCL(鹏城实验室开发者云)虚机云硬盘扩容教程【图文】linux服务器物理磁盘扩容云主机磁盘centos7根目录扩容注意：本次安利的脚本跟以上文章有所不同，希望大家能够融会贯通！未加挂磁盘前[root@localhost ~]# lsblkNAME MAJ:MIN RM SIZE RO TYPE MOUNTPOINTsdd 8:48.
2021-05-22 11:15:14
949
15
原创 jar包指定内存启动
之前jar包都是不限制内存大小，有个微服务springcloud上线的项目，需要限制单个jar包启动内存大小之前的方式java -jar xxx.jar指定启动内存的方式java -jar -Xms1024m -Xmx2048m -XX:PermSize=1024M -XX:MaxPermSize=2048M xxx.jar其中每个参数的含义是-Xms1024m 堆内存初始值-Xmx2048m 堆内存最大值-XX:PermSize=1024M 永久内存最小值-XX:.
2021-05-20 18:32:41
3785
3
原创 单行命令循环打印输出脚本
本文来源：监控linux服务器内存占用情况for((i=0;i<10;i++));do free -m;sleep 1;echo '';done如果想要循环别的命令，可以使用如下方式for((i=0;i<10;i++));do 你要输入的命令;sleep 1;echo '';done
2021-05-20 18:24:03
348
原创 安利：一文打尽 openjdk8 升级 11
由于某些原因，需要依赖openjdk11环境，所以就是这篇文章的来源其实，现在大部分还都是使用jdk8文章目录1、查看系统环境2、查看已经配好的openjdk8环境3、下面开始卸载原有openjdk4、安装openjdk111、查看系统环境[root@localhost ~]# cat /etc/centos-releaseCentOS Linux release 7.6.1810 (AltArch)[root@localhost ~]#2、查看已经配好的openjdk8环境查看.
2021-05-18 13:23:59
1049
3
原创 华为鲲鹏镜像CentOS7解决方案通用
鲲鹏（CentOS7.6）yum源地址：https://repo.huaweicloud.com/kunpeng/yum/el/7/aarch64仓库地址为：https://repo.huaweicloud.com/kunpeng/yum/el/7/aarch64/Packages/大数据的下载地址为：https://repo.huaweicloud.com/kunpeng/yum/el/7/aarch64/Packages/bigdata/Web的下载地址为：https://repo.huaw
2021-05-18 10:52:56
1182
原创 安利：分享一个rsync同步shell脚本
rsync同步至本博主个人镜像站http://210.22.22.150:3731/以同步清华镜像站为例：#!/bin/bash#镜像同步脚本# kafka#mkdir /opt/mirror/kafkarsync -avzP --bwlimit=30720 --timeout=120 --contimeout=120 rsync://mirrors.tuna.tsinghua.edu.cn/apache/kafka/ /opt/mirror/kafka# hbase#mkdir .
2021-05-17 19:44:30
314
原创 【图文】一文搞定KVM虚拟化桥接网桥配置
KVM虚拟化是比较古老又传统的技术，配置桥接网桥一直为广大网友所困应众多粉丝所求，coding特出此文不废话，反手就是两个配置文件桥接网卡ifcfg-br0TYPE=EthernetNAME=ens33DEVICE=ens33ONBOOT=yesBRIDGE=br0宿主机网卡ifcfg-ens33TYPE=BridgeBOOTPROTO=noneNAME=br0DEVICE=br0ONBOOT=yesDEFROUTE=yesPEERDNS=yesPEER.
2021-05-17 19:39:52
2029
6
原创 网友阿里云装的最新版docker起不来了，还是被coding给解决了
网友啊，看到我之前写过的一篇文章 运维之docker启动失败Failed to start Docker Application Container Engine. ，说不行，仍然解决不了问题，于是乎我又写了一篇文章 安利最全docker加速器配置 ，但是网友说还是不行于是呐，coding就远程给网友看了下，当然解决了问题以上就是本文创作的动力！下面就是coding一步一步解决问题的记录全过程一、现场情况0. 配置信息阿里云主机OS：CentOS7.9.2009Architect.
2021-05-17 19:17:15
582
4
原创 mysql如何给一张表添加两个字段？
今天下午，老大安排一个小活：“coding，把开发、测试环境数据库里面那几张表的主键改一下”coding这里有两个办法解决：方法1：直接sqlyog界面操作方法2：就是今天要分享的，使用sql语句ALTER TABLE `demo_table_1` DROP PRIMARY KEY;ALTER TABLE `demo_table_1` ADD PRIMARY KEY (`ID`,`VERSIONSEQ`);注意，如果之前的字段是自增，需要先把自增去掉，修改完主键再把自增加上。删除.
2021-05-17 18:45:36
2446
原创 安利：win10专业版搭建maven环境（内含阿里云中央仓库配置）图文教程
正文目录0、提前准备好JDK1.8环境1、下载maven2、解压maven3、配置环境变量4、查看mvn版本5、配置仓库地址6、验证远程中央仓库是否修改成功0、提前准备好JDK1.8环境详细配置可参考：https://blog.csdn.net/frdevolcqzyxynjds/article/details/103162959需要注意的地方：（0）下载JDK1.8：http://zvipz.vip:3731/softwares/Java/注意：选择1.8版本： jdk-8u181
2021-05-05 00:12:06
444
2
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人