- 博客(121)
- 资源 (33)
- 收藏
- 关注
RSS订阅
原创 记录一个IT菜鸟的成长之路。
所 有 离 开 的 人 都 信 誓 旦 旦 地 说 过 他 们 不 会 忘 记 曾 经 的 一 切 可 是 最 后 都 忘 了
2016-01-29 17:00:51
4805
5
原创 配置Hiveserver 高可用，新增Hiveserver2启动失败
配置Hiveserver 高可用，新增Hiveserver2启动失败:Error initializing notification event poll
2022-05-30 16:16:38
2325
1
原创 KUDU Master迁移
kudu集群为kudu 1.9.0-cdh6.2.1，3个master高可用集群，其中一个master节点需要下线维护，迁移该节点的master角色至其他节点。
2022-04-26 15:34:54
870
原创 HDFS报错datanode.DataNode (DataXceiverServer.java:run(168))
java.io.IOException: Xceiver count 202 exceeds the limit of concurrent xcievers: 200
2022-03-02 16:41:27
1973
原创 使用Hive SQL插入动态分区的Orc表OOM异常分析
执行语句‘insert into table xxx partition(dt) select …’ 向ORC格式的表中插入数据时报错
2021-06-18 16:43:02
1245
翻译 Apache Hadoop 3.x HDFS 磁盘平衡
Diskbalancer 是一个命令行工具，可以将数据均匀分布在一个数据节点的所有磁盘上。该工具与负责集群范围数据平衡的Balancer不同 。由于多种原因，数据可能在节点上的磁盘之间分布不均。这可能是由于大量写入和删除或由于磁盘更换而发生的。该工具针对给定的数据节点运行并将块从一个磁盘移动到另一个磁盘。
2021-06-18 16:38:23
666
原创 记录一次HBase异常处理过程
记录一次HBase异常处理过程，包括HDFS数据问题、MetaData问题、regions重叠问题、表数据不一致
2021-04-15 17:35:02
1019
原创 CentOS7.4配置OpenLDAP Client集成AD服务及SSSD服务与SSH服务
CentOS7.4配置OpenLDAP Client集成AD服务及SSSD服务与SSH服务
2021-04-14 22:05:10
2197
原创 kafka-manager搭建
kafka-manager管理多个kafka集群便捷的检查kafka集群状态选择要运行的副本为已存在的topic增加分区
2021-03-26 19:43:34
1811
2
原创 Centos7.2升级OpenSSH_7.4p1至OpenSSH_7.9p1
Centos7.2升级OpenSSH_7.4p1至OpenSSH_7.9p1包括采坑过程，可以参考！
2019-07-19 11:55:15
1982
原创 深度学习目标检测工具箱mmdetectiona安装
CentOS Linux release 7.4.1708深度学习目标检测工具箱mmdetectiona安装
2019-07-12 15:07:34
882
原创 如何优雅地踢出Linux中登录的用户
Linux是一个多用户的操作系统，如何踢出系统中其他用户，网上有不少方法使用kill 用户进程，操作简单粗暴，如何操作更优雅呢？使用pkill优雅地剔除Linux登陆的用户首先找出要踢的用户：# who或者# w比如我想要踢掉pts/0的用户# pkill -kill -t pts/0...
2019-07-12 10:50:16
552
翻译 ambar使用API删除或移动web无法操作的服务
通过ambariAPI删除&移动 Mapreduce2 History Server，其他服务操作方法类似删除服务：curl -u admin:UnionBigData.Ad.05 -H "X-Requested-By: ambari" -X PUT -d '{"RequestInfo":{"context":"Stop Service"},"Body":{"ServiceInfo":...
2019-07-02 11:36:23
380
原创 使用Ksonnet部署kubeflow和tf-operator
使用Ksonnet部署kubeflow和tf-operator一、基础环境规划Linux操作系统：CentOS Linux release 7.4.1708Kubernetes版本1.9.0Go版本 go1.9.2Ksonnet 版本0.9.2二、安装go环境1、安装go和ks上传tf-operator.tar.gz至/root目录并解压解压后得到三个文件夹：kubeflow-i...
2019-03-22 08:59:57
2321
9
原创 Ranger启动失败后，重新安装遇到MySQL异常
Ranger启动失败后，重新安装启动rangeradmin遇到MySQL异常 启动rangeradmin时报错： SQLException : SQL state: HY000 java.sql.SQLException: Operation CREATE USER failed for ‘rangeradmin’@’%’ ErrorCode: 1396 SQLException ...
2018-08-03 16:42:58
1578
1
原创 ambari安装Ranger启动遇到的异常
启动Ranger KMS Server时报错：1.FileNotFoundException WARNING: Failed to scan [file:/usr/jdk64/jdk1.8.0_131/lib/rt.jar] from classloader hierarchy java.io.FileNotFoundException: /usr/jdk64/jdk1.8....
2018-08-03 10:44:51
4246
原创 k8s运行简单应用
K8S运行应用基础环境 操作系统：CentOS Linux release 7.4.1708 (GUI) docker版本: 17.03.2-ce socat版本:1.7.3.2-2.el7.x86_64 kubelet版本: 1.9.9-9.x86_64 kubernetes-cni版本: 0.6.0-0.x86_64 kubectl...
2018-07-31 14:27:07
7494
原创 docker私有仓库搭建
一、docker私有仓库搭建1、导入私有仓库registry# docker load -i registry.tar.gz查看导入镜像：# docker images | grep registry2、启用私有仓库registry：# docker run -d -p 5000:5000 –restart always –name registry registry:...
2018-06-19 15:34:04
2639
原创 kubeadm安装Kubernetes V1.10.0集群详细文档
kubeadm安装Kubernetes V1.10集群一、前置准备1.基础环境规划操作系统：CentOS Linux release 7.4.1708 (GUI)docker版本: 17.03.2-cesocat版本:1.7.3.2-2.el7.x86_64kubelet版本: 1.10.0-0.x86_64kubernetes-cni版本: 0.6.0-0.x86_64...
2018-06-19 10:38:04
13083
原创 MySQL调优入门脚本tuning-primer.sh使用及问题整理
tuning-primer.sh是MySQL调优入门脚本，从“SHOW STATUS LIKE …”和“SHOW VARIABLES LIKE …”中获取信息，然后尝试为调整服务器变量列出合理的建议。 它与MySQL 3.23及以上版本的所有版本兼容。 现支持的调优： Slow Query Log Max Connections Worker Threads Memo...
2018-04-19 10:23:23
2719
原创 linux服务器快速寻找和消灭僵尸进程
linux服务器会出现一些僵尸进程，如何快速寻找和消灭这些僵尸进程呢？ 首先，我们可以用top命令来查看服务器当前是否有僵尸进程，可以看到zombie僵尸进程数，如果数字大于0，那么意味着系统当前存在有僵尸进程。 # top 用ps和grep命令寻找僵尸进程 # ps -A -ostat,ppid,pid,cmd | grep -e '^[Zz]' -A 参数列出所有进程 -o 自...
2018-04-18 13:54:29
2231
原创 Crontab -e You are not allowed to use this program (crontab)
最近注意到有系统创建的普通帐户无法使用crontab，但以root身份运行计划任务是不推荐的。 每次尝试使用普通用户编辑crontab时，收到以下消息：[miner@cy2 ~] $ crontab -eYou (miner) are not allowed to use this program (crontab)See crontab(1) for more information...
2018-04-18 09:52:56
24656
2
原创 MySQL 自启动时报错can't create PID file: No such file or directory
系统版本：Red Hat Enterprise Linux Server release 7.0 MySQL版本：5.7.16-1.el6.x86_64 安装MySQL后，设置好了开机自启动。 但是重启服务器后，MySQL并没有启动，查看日志如下： 2018-04-13T06:27:24.608793Z 0 [ERROR] /usr/sbin/mysqld: Can’t create...
2018-04-13 15:23:27
7334
原创 Centos 7安装 ambari-agent报错NetUtil.py-[SSL: CERTIFICATE_VERIFY_FAILED]
Centos 7安装 ambari通过Ambari部署系统时，ambari-agent注册失败，在/var/log/ambari-agent的log中可以看到日志显示：ERROR 2018-03-08 15:02:25,223 NetUtil.py:88 - [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed (_ssl.c:5...
2018-03-08 17:08:10
5665
原创 记一次MongoDB服务器卡死分析解决思路
MongoDB服务器卡死，无法ping通，无法远程连接，无法登陆终端，终端显示： CentOS 7- kernel: BUG: soft lockup - CPU#3 stuck for 30s! [xxx:xxx]
2018-02-09 17:05:46
3636
原创 如何在CDH5.12集群中启用Kerberos认证
CDH启用kerberos参考链接: https://www.cloudera.com/documentation/enterprise/5-8-x/topics/security.html
2018-02-08 13:09:56
15537
1
CM6.1.0和CDH6.1.0资源下载
2021-04-14
CDH6.0.1.txt
2021-04-14
CM5.10.1和CDH5.10.1资源下载
2021-04-14
CM5.16.2和CDH5.16.2资源下载
2021-04-14
CM5.12.1和CDH5.12.1资源下载
2021-04-14
CM6.2.0和CDH6.2.0资源下载
2021-04-14
CM5.15.0和CDH5.15.0资源下载
2021-04-14
CM5.14.2和CDH5.14.2资源下载
2021-04-14
CM6.2.1和CDH6.2.1资源下载
2021-04-14
CM6.3.1和CDH6.3.2资源下载
2021-04-14
FusionInsight LibrA Tools Data Studio
2018-05-23
ruby-2.2.0.tar.gz
2018-04-19
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人