自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(21)
  • 收藏
  • 关注

原创 如何在centos7,linux ,安装pip

我们知道centos 7上,默认是python 2.7的版本,并且没有pip命令,如何安装pip

2023-11-22 15:15:10 335

原创 python实现hive中的表写入clinkhouse中

python实现hive中的表写入clinkhouse中。

2023-10-12 09:48:03 286

原创 centos7 vsftpd 进阶配置(主动模式配置+限定用户访问范围)

配置好ftp之后,我们还要限定用户可以查看的范围的时候,应该如何配置

2023-08-18 16:34:50 357 1

原创 centos7安装vsftpd3.0.2(成功链接通)

远程上传文件到服务器,可以通过ftp来实现,这里介绍ftp服务端的配置

2023-08-03 10:39:05 398

原创 【openVPN】Centos7 部署openVPN多客户端 已连通

openvpn 是一款安全的vpn服务,可以实现多人稳定的远程办公环境

2023-06-01 17:33:58 11296 20

原创 CDH时钟偏差:无法找到主机的 NTP 服务,或该服务未响应时钟偏差请求。

1、单节点主机重启后,NTP服务正常,cdh界面就是报ntp服务异常2、单独重启NTP服务的时候。

2023-05-29 13:47:53 927

原创 python3 解决UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0xcc in position 1448:

摘要:当我们写python3的代码里面出现中文注释的时候,会出现编码错误的提示

2023-05-24 14:58:09 697

原创 Linux 查看文件目录大小和文件目录大小

当我们做服务器存储空间管理的时候,往往需要各个目录的目录大小

2022-11-25 11:13:11 362

原创 hive亿级别的数据比较 distinct、 group by、 row_number() 去重效率

随着互联网的发展,产生的数据量越来越大,重复的数据也会越来越多,选择合适的去重方式是我们所需要的;这里对比了1亿1千万的数据来进行测试,重复数量为1千万条,重复比约等于1比10;

2022-11-08 14:44:54 3429

原创 python实现解析json告警邮件转换成文本,并转发告警邮件

平台自带的告警平台发送的邮件,往往不能够分得清我们所需要的告警内容,需要人为的解析区分出来。

2022-11-04 15:24:00 360

原创 CenterOS最小化安装后安装的常用工具

当最小安装系统的时候,我们经常要使用的工具都需要安装,我在这里整理了一些常用的工具:wget,vim,yum源,ifconfig,zip、unzip,rz和sz,Tree,telnet

2022-10-28 10:45:09 695

原创 CDH6.3.2集成flink1.13

CDH6.3.2集成flink1.13

2022-10-25 15:06:15 3786

原创 cdh断电后故障解决 -- process information unavailable

机房断电,服务器意外关机,-- process information unavailable

2022-10-20 11:24:56 219

原创 ERROR 1045 (28000): Access denied for user ‘root‘@‘localhost‘ (using password: YES)已解决

MySQL有时候登录正确的密码后还是报下面这个错误(rpm 安装的MySQL 5.7)

2022-10-18 17:39:21 1144

原创 hive 创建分区表 删除分区表 插入分区表

hive 创建分区表 删除分区表 插入分区表

2022-10-18 15:25:22 1862

原创 hdfs drwxrwxr-t -t 啥意思

hdfs drwxrwxr-t -t 啥意思,hdfs文件目录权限介绍

2022-10-17 11:11:48 679

原创 Error: Could not open client transport with JDBC Uri: jdbc:hive2://解决连接beenline连接HiveServer2报错

beenline 连接hiveserver2 报错背景:ranger 整合cdh后。

2022-10-14 13:42:57 6036

原创 不良 : 群集中有 1,814 个 副本不足的块 块。群集中共有 1,816 个块。百分比 副本不足的块: 99.89%。 临界阈值:40.00%。

The health test result for HDFS_UNDER_REPLICATED_BLOCKS has become bad: 1,814 under replicated blocks in the cluster. 1,816 total blocks in the cluster. Percentage under replicated blocks: 99.89%. Critical threshold: 40.00%.(不良 : 群集中有 1,814 个 副本不足的块 块。群集中共

2022-10-14 11:12:55 1195

原创 cdh 集群安全启动和关闭

每当通知断电的时候,我们都需要手动去关闭集群环境,来电的时候手动开启集群,正确操作就显得尤为重要;

2022-10-13 11:35:00 1341

原创 cdh6.3.2 生产环境数据目录lvm格式扩容(保姆式扩容)

cdh环境,数据目录不够用,扩容数据目录

2022-10-12 15:19:45 491

原创 如何查看spark任务总共有多少个job

当我们看spark任务执行进度的时候,往往判断job总数,来判断spark代码执行到了哪里,所以如何查看job总数是我们要计算出来的

2022-09-21 11:04:17 1185

cdh6.3.2编译的ranger版本

此软件可以直接适用于cdh6.3.2的安装和应用,ranger我们都知道,是一个权限管理工具,可以做到精细化权限管理,编译ranger的cdh6.3.2,会出现各种报错,这里提供编译好的包

2023-08-03

etl开发工具kettle7

etl开发工具kettle7

2022-11-17

CDH6.3.2集成flink1.13 parcel 包

FLINK-1.13.2-BIN-SCALA_2.11-el7.parcel.sha FLINK-1.13.2-BIN-SCALA_2.11-el7.parcel manifest.json FLINK_ON_YARN-1.13.2.jar 安装教程见 https://blog.csdn.net/m0_49027804/article/details/127511423?spm=1001.2014.3001.5502

2022-10-25

一款好用小巧的jar包反编译小工具

一款好用小巧的反编译小工具,用于jar包反编译,查看源码内容,轻巧好用,exe文件免安装,点开直接用,开箱即用

2022-10-14

BCompare 专业高效的文件夹对比工具

BCompare最新版软件支持对比文件夹、文件、文本、图片、注册表等功能,能够帮助用户同步文件内容并合并。通过BCompare软件用户可以轻松检查其文件大小、名称、日期等信息,同时软件还拥有源码管理的功能,用户可以用它管理源码。

2022-10-12

linux mysql5.7.0 rpm 安装包

摘要:rpm 安装mysql 5.7版本,含(mysql-connector-java-5.1.48.jar) 用途:数据库,jdbc 系统:Linux系统 ,解压密码:mysql

2022-10-12

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除