自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(7)
  • 资源 (5)
  • 收藏
  • 关注

原创 ES按照时间删除索引上的数据

被删除的文档在segment合并时,才会被真正删除掉。在某些特定情况下,我们需要强制Elasticsearch进行segment merging,已释放其占用的大量系统、磁盘等资源。执行的期间你会发现,磁盘空间会有一个反复变化的过程,磁盘使用率会先增长,然后在删除释放空间这样一个过程。集群的索引没有预先规划大小,导致索引特别大,删除数据删除索引的形式进行,只能在原来的索引上进行数据删除操作。删除索引时采用最经典的方式,即按照时间戳进行删除,比如删除90天以前的历史数据,保留最新的。

2023-04-23 17:32:26 2413

原创 Logstash动态加载配置文件,免重启

logstash动态加载配置文件

2023-03-28 17:04:32 704

转载 Spark工作原理和基本概念

一文搞懂spark基本原理,工作和面试都不迷茫

2023-02-06 10:08:30 134

转载 SparkStreaming和Flink关键区别

SparkStreaming 和 Flink 区别 different

2022-09-28 10:23:30 2464

转载 HDFS 删除大量文件后不可访问问题处理

一、问题现象由于前一段时间ORC delta文件合并失败,HDFS中存在了大量delta文件,最终导致访问该数据表失败。通过想办法把数据搬移到新表后,我们drop掉了这个旧表。没想到一会儿使用人员报告整个HDFS不可访问。简单重启HDFS后,系统恢复正常了。但一个小时后,整个HDFS又不正常了。二、问题查找检查namenode日志发现以下异常:1. 大量数据块不属于任何文件......2018-04-...

2021-04-12 09:30:18 790

转载 python中文编码与处理详解(个人认为比较全面详细了)

注意:本文只是针对 python 2,在 python 3 中,编码方式与处理技巧有些许变化,具体请参考:Python 2 与 Python 3 的差异对比:http://my.oschina.net/leejun2005/blog/173553一、使用中文字符在python源码中如果使用了中文字符,运行时会有错误,解决的办法是在源码的开头部分加入字符编码的声明,下面是一个例子:...

2019-05-10 06:42:33 1020

转载 来至JavaEye:liujunsong的评论——中国软件

软件行业的情况,就是中国这个新兴经济体在世界经济中地位的一个缩影. 用郎咸平的话讲,就是在整个产业链里面,并不是只有在生产制造这个环节创造价值,创造利润,而是在产品的策划,推广,品牌,形象等各方面,都在创造着价值. 而中国人的总体思维,目前尚未认识到这一点. 每个人从小接受的教育,都是劳动最光荣,而对于思考这种事情,是避之惟恐不及.生怕有点新想法不合规矩,给自己带来麻烦.这种思想上的长期浸染,已经

2009-04-09 14:26:00 216

ntp-4.2.8p14.tar.gz

ntp的最新源码,对于需要修复漏洞的,自己编译升级一下;本人也编译过;解决ntp的安全漏洞;一般的安全软件会扫描出一堆低版本的ntp漏洞

2020-07-03

nmon16h.tar.gz

nmon16h.tar.gz,NMON for linux 包,支持arm树莓派编译;大家可以试试是否好用。ARM: nmon16h_arm_ubuntu1604 Raspberry Pi, POWER: nmon16h_power_rhel7 compiled on RHEL 7.5, nmon16h_power_ubuntu1804, X86_64: nmon16h_x86_rhel7 compiled on RHREL 7.5, nmon16h_x86_ubuntu1804

2020-07-03

grafanarel.s3.amazonaws.com-grafana-2.6.0-linux64.tgz

ambari编译依赖的grafana,一般找不到,大家懂得;Could not find artifact org.apache.phoenix:phoenix-core:jar:4.4.0.2.3.4.0-3347,或者hbase、grafana、hadoop 和官方的其实是一样的,放心下载, 原名称是grafana-2.6.0.linux-x64.tar.gz,改下包名即可

2019-05-08

rpmrebuild工具包(亲测可用)

rpmrebuild工具包,亲测是可用的,使用命令如下: rpmrebuild --package --notest-install -e XXXX.rpm rpmrebuild -s xxxx.spec xxxx

2019-03-05

ORACLE性能优化31条

oracle性能优化的小文档,当然不是本人著作,不过好东西要拿出来大家分享不是?这个文档简单直接,希望能帮助到你!!

2013-12-05

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除