believe-xin-CSDN博客

原创新版Typora集成picgo图传更方便

新版Typora集成picgo图传更方便配置种类1、Picgo-core（command-line）优点：不依赖app，配置简单。缺点：多个图床切换不方便，暂不支持gitee等2、Picgo（app）优点：管理多个地址，例如内网和外网图床地址切换，支持的图传种类较多，可以随时随意切换缺点：需要借助Picgo客户端才能完成一、Picgo-core（command-line）设置步骤打开文件文件->偏好设置->图像上传服务选项选择Picgo-core（co

2021-04-29 23:39:20 351

原创 postgresql 实用sql

清理重复数据利用ctid删除重复数据delete from <tablename> where ctid not in (select min(ctid) from <tablename> group by id)查看空间占用-- 查看索引占用空间大小select pg_size_pretty(pg_relation_size('playboy_id_pk'));-- 查看数据占用空间大小select pg_database_size('playboy');-

2021-04-19 09:59:45 228

原创 NFS 安装与部署

一、服务器端1、安装#执行命令(只安装nfs：#centos7自带了rpcbind)yum -y install nfs-utils#安装nfs+rpcyum -y install nfs-utils rpcbind验证: rpm -qa nfs-utils2、配置在服务端创建一个共享目录 /data/share(目录可自定义)mkdir -p /data/sharechmod 666 /data/share然后，修改 NFS 配置文件 /etc/exportsv

2021-04-19 09:59:35 209

原创 Docker 常见问题（更新）

无法rm 容器docker rm -f {containerid}Error response from daemon: Driver overlay2 failed to remove root filesystem 4ba6605068d378130819f405899a651dadb81a956103bd4cb9927a5bafd3487f: remove /var/lib/docker/overlay2/047bf998e4a9e4c373534f

2021-04-19 09:59:24 269

原创 elasticsearch 之数据迁移 - Snapshot

一、Snapshort做数据迁移的优点优点1、速度快适合大数据量迁移(2500万数据建立快照需要2-3分钟产出4.5G文件)二、配置单节点配置1、创建快照仓库在elasticsearch机器上创建仓库目录：mkdir /repository# 赋权chown -R elasticsearch:elasticsearch /repository2、在elasticsearch.yml文件中加入下面配置:path.repo: /repository3、启动elasticse

2021-04-19 09:58:38 578 1

原创开机启动hadoop集群（虚拟机）

一、背景在学习hadoop的时候，在本地通过VMware搭建了一个hadoop集群，但是由于每天电脑都需要重启，所以虚拟每天都会被关掉，所以想要写一个脚本一键启动虚拟机+hadoop集群二、实现方案一1、经查阅资料发现，VMware可以通过命令启动(后台启动虚拟机)，命令如下：# 使用vmrun命令（需要找到VMware的工作目录将工作目录加入path里面），命令说明 -T 主机类型，start 启动并指定虚拟机（可以通过vmrun list 查看正在运行的虚拟机），nogui 不启动VMwa

2021-04-18 16:28:42 2905

原创 iframe跨域解决方案-1(document.domain)

js-iframe跨域解决方案问题：我这边有一个即时通信的服务器，提供给开发人员一个JS API来访问这个通信服务器，然而开发人员把JS文件拷贝到本机的web应用时去调用远程的即时通信服务器，出现了跨域的情况。现在我们这边只通了JS的api，因此必须解决这个跨域的问题。解决方案：将apache服务器和web应用服务器放在同一个服务器上，分别处于不同的端口，通过 document.domain=”IP地址” 设置域来发送请求给apatch服务器界面，最终返回即使通信服务器的响应内容。1、在本机上安装一个

2021-04-18 16:26:59 822

原创 iframe跨域解决方案-2(postMessage)

1.父域页面(a.html)：act/msg/evalStr 为自定义属性<!DOCTYPE html><html><head> <meta charset="UTF-8"> <title>Insert title here</title></head><body> <input type="text" id="textValue"/> <input t

2021-04-18 16:26:33 136

原创 postgreSQL 修改、创建表空间

1、表空间的概念PostgreSQL中的表空间允许在文件系统中定义用来存放表示数据库对象的文件的位置。在PostgreSQL中表空间实际上就是给表指定一个存储目录。2、表空间的作用官方解释：通过使用表空间，管理员可以控制一个PostgreSQL安装的磁盘布局。这么做至少有两个用处。如果初始化集簇所在的分区或者卷用光了空间，而又不能在逻辑上扩展或者做别的什么操作，那么表空间可以被创建在一个不同的分区上，直到系统可以被重新配置。表空间允许管理员根据数据库对象的使用模式来优化性

2021-04-18 16:25:34 4420

原创 postgresql 如何手动清理归档文件（pg_wal）

背景发现数据库宕机，排查原因发现数据磁盘爆满，经排查发现是数据库数据目录下，pg_wal目录占用过大导致。pg_wal（Write-AHead Logging）说明wal日志位置：$PGDATA/pg_wal(pg10之前叫pg_xlog)##wal日志文件命名规则：#我们看到的wal日志是这样的：000000010000000100000092#其中前8位:00000001表示timeline；#中间8位：00000001表示logid；#最后8位：00000092表示log

2021-04-18 16:23:57 5522 2

原创 gpload的配置与使用

启动服务（gpfdist）因为gpload是对gpfdist的封装，因此使用gpload之前必须开启gpfdist的服务，不然无法使用gpfdist -d /home/admin -p 8181 -l /tmp/gpfdist.log &编写gpload的yml文件VERSION: 1.0.0.1DATABASE: db_marketUSER: testuserHOST: 172.18.15.123PORT: 5432GPLOAD: INPUT: - SOU

2021-04-18 16:23:15 1789

原创 Elasticsearch之ik分词器

一、安装ik分词器方法一：下载分词器源码github地址 : https://github.com/medcl/elasticsearch-analysis-ik编译mvn clean package安装cp target/releases/elasticsearch-analysis-ik-{version}.zip your-es-root/plugins/ik \&& cd your-es-root/plugins/ik \&& unzip you

2021-04-18 16:22:25 96

原创 docker 安装

1、查看系统上是否已安装dockeryum list installed | grep docker# 如果有卸载dockersudo yum remove docker \ docker-client \ docker-client-latest \ docker-common \ docker-latest \ doc

2021-04-18 16:21:48 74

原创基于 Swarm 的 docker 集群搭建

原文地址1、安装环境要求3台可以网络通信的Linux主机，并且安装了docker安装1.12.0以上的docker管理节点的IP地址主机之间开放端口2、准备3台主机3台主机可以是物理机，虚拟机，云主机，甚至是docker machine创建的主机。并安装docker。三台主机分别是manager1，work1和worker2.安装1.12.0以上的docker管理节点的IP地址所有swarm集群中的节点都会连接到管理节点的IP地址主机间开放端口以下端口必须.

2021-04-18 16:21:11 112

原创 Z-score模型

Z-score模型Z-score是一维或低维特征空间中的参数异常检测方法。该技术假定数据是高斯分布，异常值是分布尾部的数据点，因此远离数据的平均值。距离的远近取决于使用公式计算的归一化数据点z i的设定阈值Zthr：其中xi是一个数据点，μ是所有点xi的平均值，δ是所有点xi的标准偏差。然后经过标准化处理后，异常值也进行标准化处理，其绝对值大于Zthr：Zthr值一般设置为2.5、3.0和3.5。该技术是使用KNIME工作流中的行过滤器节点实现的。...

2021-04-18 16:20:00 4100

原创 postgresql 中的 like 查询优化

当时数量量比较庞大的时候，做模糊查询效率很慢，为了优化查询效率，尝试如下方法做效率对比一、对比情况说明：1、数据量100w条数据 2、执行sqlexplain analyze SELECT c_patent, c_applyissno, d_applyissdate, d_applydate, c_patenttype_dimn, c_newlawstatus...

2020-01-17 16:26:25 2408

原创 springboot 文件上传

1、引入maven<dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web</artifactId></dependency><dependency> &...

2019-12-19 11:52:45 92

qq_23986087的博客