2021年02月_私念

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 linux下utf-8 BOM的检查和删除

参考：https://www.phpmianshi.com/?id=240背景当源程序是gbk格式，你转换为 utf8 的时候，很多情况是头部会出现bom,当是php 程序时候，这样会出现很多意想不到的事情，那怎么办呢，你可以用linux 命令来查找，然后对文件的bom 进行删除grep-r$’\xEF\xBB\xBF’*|grep.phpbom:UTF-8签名（UTF-8 signature）也叫做BOM（Byte Order Mark）解决方案1. 用v...

2021-02-25 19:36:18 1438

原创 linux中流量监控工具iftop详解

参考：https://www.phpmianshi.com/?id=246要查看实时的网络流量，监控TCP/IP连接等，则可以使用iftop。一、iftop是什么？iftop是类似于top的实时流量监控工具。官方网站：http://www.ex-parrot.com/~pdw/iftop/二、iftop有什么用？iftop可以用来监控网卡的实时流量（可以指定网段）、反向解析IP、显示端口信息等，详细的将会在后面的使用参数中说明。三、安装iftop安装方法1、编译安装如果采

2021-02-25 19:30:14 332

原创 elasticsearch中重新索引数据

参考：https://www.phpmianshi.com/?id=170概念虽然你可以给索引添加新的类型，或给类型添加新的字段，但是你不能添加新的分析器或修改已有字段。假如你这样做，已被索引的数据会变得不正确而你的搜索也不会正常工作。修改在已存在的数据最简单的方法是重新索引：创建一个新配置好的索引，然后将所有的文档从旧的索引复制到新的上。_source 字段的一个最大的好处是你已经在 Elasticsearch 中有了完整的文档，你不再需要从数据库中重建你的索引，这样 ...

2021-02-23 20:20:52 471

原创 elasticsearch中动态模板全解实战

参考：https://www.phpmianshi.com/?id=169动态模板在我们最开始使用ES的时候，可能还不太了解mapping，也没有添加过mapping为什么我们还是能够正常的添加文档。那是因为ES可以动态映射，添加文档的时候遇到没有的字段，可以动态的添加到mapping中动态模板，英文名为Dynamic Templates，是根据Elasticsearch可识别的数据类型，结合字段名称，来动态设定字段类型的一种机制。自动识别规则首先es可以自动识别文档字段的类型.

2021-02-22 19:46:52 1449

原创 elasticsearch中mapping全解实战

参考：https://www.phpmianshi.com/?id=168Mapping简介#mapping 是用来定义文档及其字段的存储方式、索引方式的手段，例如利用mapping来定义以下内容：哪些字段需要被定义为全文检索类型哪些字段包含number、date、布尔、浮点类型等格式化时间格式自定义规则，用于控制动态添加字段的映射自定义mappingmapping中的字段类型一旦设置，禁止直接修改，因为 lucene实现的倒排索引生成后..

2021-02-19 20:12:40 285

原创 linux中配置sudo赋予普通用户对某些命令的执行权限

参考：https://www.phpmianshi.com/?id=238背景有时我们需要给普通用户，某个命令的执行权限，但是又不想让这个普通用户能执行更多的其他命令，这时候我们可以配置sudo，设置只能执行某几个命令即可配置vim/etc/sudoers#新增如下一行，赋予www用户能sudo执行supervisorctl命令wwwALL=(ALL:ALL)NOPASSWD:/bin/supervisorctl多个命令可以逗号分隔更多sudo介...

2021-02-18 14:39:50 2188

原创 php中autoload机制详解

参考：https://www.phpmianshi.com/?id=237背景PHP在魔术函数__autoload()方法出现以前，如果你要在一个程序文件中实例化100个对象，那么你必须用include或者require包含进来100个类文件，或者你把这100个类定义在同一个类文件中——相信这个文件一定会非常大。但是__autoload()方法出来了，以后就不必为此大伤脑筋了，这个类会在你实例化对象之前自动加载指定的文件。autoload 机制概述在使用PHP的OO模式开发系统时，通常.

2021-02-10 11:48:17 307

原创 elasticsearch中最重要的查询过滤语句

参考：https://www.phpmianshi.com/?id=167term 过滤term 主要用于精确匹配哪些值，比如数字，日期，布尔值或 not_analyzed 的字符串(未经分析的文本数据类型){ "term": { "age": 26 }}{ "term": { "date": "2014-09-01" }}{ "term": { "public": true }}{ "term": { "tag": "full_text" }}terms 过滤te..

2021-02-09 19:16:21 226

原创 logstash中同步mysql到elastic常见问题总结

参考：https://www.phpmianshi.com/?id=1661. mysql查询字段中有 type字段问题原因select语句中查到了type, 但es中会默认有一个type, 这使得两个type冲突.会导致同步失败，且没有报错GETmy_index/_mapping返回的数据中包含一个type字段如下："type":{"type":"text","fields":{"keyword"...

2021-02-07 19:50:29 842

原创 mysql中超大表的删除方法

参考：https://www.phpmianshi.com/?id=235在mysql中遇到一个大表，大概有17G左右，删除这张表。通常的删除操作可以通过delete、drop、truncate操作，但是有可能导致mysql hang住，必须使用些特殊的方法。1、建立硬链接找到mysql的数据文件，找到这张表在硬盘上的名称，我的是tmplst.frm和tmplst.ibd，通过查看tmplst.ibd的大小到了17G左右，这就是无法删除的原因。其中tmplst是表名。在这个文件夹下，为tmp

2021-02-05 19:45:50 946

原创 linux中三种风格Unix、BSD、GNU的ps的参数说明

参考：https://www.phpmianshi.com/?id=233背景Linux系统中使用GNUps命令支持3种不同类型的命令行参数： Unix风格的参数,前面加单破折线; BSD风格的参数,前面不加破折线; GNU风格的长参数,前面加双破折线。 Unix风格参数ps [-aefFly] [-p pid] [-u userid]-a 与任何用户标识和终端相关的进程-e 所有进程（包括守护进程）-p pid 与指定PID相关的进..

2021-02-05 19:43:22 344

原创 HTTP状态码302、303和307的前世今生

参考：https://www.phpmianshi.com/?id=232背景《HTTP权威指南》第3章在讲解30X状态码时，完全没有讲清楚为什么要有302、303、307，以及他们的关系，一句“问题出在HTTP1.1”；而第五章在讲重定向响应时，没有说到现在很常见的302，反而是说我从没遇到过的303和307。对于这3个状态码，WiKi和RFC文档都有详解，下面我们简单介绍一下。302RFC1945(http://tools.ietf.org/html/rfc1945#page-34)，也

2021-02-04 18:00:51 279

原创 linux中sudo提权漏洞复现及修复-CVE-2021-3156

参考：https://www.phpmianshi.com/?id=2341.背景sudo被披露存在一个基于堆的缓冲区溢出漏洞（CVE-2021-3156，该漏洞被命名为“Baron Samedit”），可导致本地权限提升。当在类Unix的操作系统上执行命令时，非root用户可以使用sudo命令来以root用户身份执行命令。由于sudo错误地在参数中转义了反斜杠导致堆缓冲区溢出，从而允许任何本地用户（无论是否在sudoers文件中）获得root权限，无需进行身份验证，且攻击者不需要知道用户密码。

2021-02-03 19:56:35 912