游与寻-CSDN博客

原创 Milvus1.1.0(仅CPU)单节点部署 on Centos7.X

文章目录一、服务器要求二、部署官网地址一、服务器要求操作系统要求操作系统支持的版本CentOS7.5 +Ubuntu LTS18.04+硬件要求操作系统推荐配置CPUIntel CPU Sandy Bridge or higher.CPU扩展（需支持至少一项）SSE42AVXAVX2AVX512内存8G+硬盘存储SATA 3.0 SSD +软件要求软件版本Docker19.03+

2021-07-23 11:29:28 717

原创 Milvus2.0的部署（Centos 7）

文章目录简介Milvus部署Docker 和 Docker Compose环境检查检查CPU 对 SIMD库扩展的支持安装单机版官网地址简介Milvus 是一款开源的、针对海量特征向量的相似性搜索引擎。基于异构众核计算框架设计，成本更低，性能更好。在有限的计算资源下，十亿向量搜索仅毫秒响应。普遍用于图片搜索、智能问答、以商品搜商品等场景Milvus部署Docker 和 Docker Compose环境检查Milvus是基于Docker部署的，你的Docker需要符合以下条件Dock

2021-07-16 16:46:35 2674 1

原创 Centos 7.2 部署Docker

文章目录部署前提卸载旧版部署新版本yum安装方式部署前提1.系统版本要在7.X +2. centos-extras 必须激活，这个模块默认是激活状态，如果被关闭了，则需要重启3. 推荐使用overlay2存储驱动卸载旧版如果之前部署过旧版本的Docker，则先清理掉旧版sudo yum remove docker \ docker-client \ docker-client-latest \

2021-07-15 17:29:10 314

原创 Clickhouse工作原理

文章目录Clickhouse为什么做查询分析那么快？1. 数据分区（MergeTree）1.1 命名规则 & 合并规则触发合并的时机1.2 各文件含义1.3 文件目录时序图2. 列式存储3. 一级索引（主键索引，稀疏索引）4. 二级索引（跳数索引）5. 数据压缩6. 数据标记Clickhouse为什么做查询分析那么快？因为clickhouse使用了下列方案：clickhouse 数据分区clickhouse 列式存储clickhouse 一级索引（主键索引）clickhouse 二级索

2021-07-15 14:52:13 3578

原创 Redis 6.0配置整理

官网文档下列表格中，加粗项为重点关注像net work（网络相关）配置名默认值说明bind127.0.0.1绑定本地网卡IP，详情protected-modeyes安全模式，yes=开启，no=关闭，开启状态下需设置密码访问port6379端口号，不要使用默认端口号tcp-backlog511TCP三次握手完成队列长度，详情unixsocket注释支持unix套接字unixsocketperm注释支持unix套接字tim

2021-07-03 22:56:44 429

原创 Redis info 命令详解

官网原址：https://redis.io/commands/info命令：info该命令仅展示当前节点的信息，而不是集群汇总信息Server（服务的系统配置）属性名属性值说明redis_version5.0.8Redis版本号redis_git_sha100000000GIT SHA1redis_git_dirty0Git dirty flagredis_build_idcadca3f2c5e718a5Redis 构建生成的唯一码red

2021-06-30 17:32:54 400

原创 centos7.4 本地redis伪集群搭建

redis编译# 下载3.0+的redis版本，旧版本不支持集群模式wget http://download.redis.io/releases/redis-4.0.13.tar.gz# 解压文件tar -zxvf redis-4.0.13.tar.gzcd redis-4.0.13# 编译并安装make && make install集群部署# 创建目录mkdir /usr/local/rediscd /usr/local/redis# 创建各集群目录，最少要有6

2021-05-21 15:04:50 105

原创周一至周日，0点至24点，bool控制的16进制形式实现

背景用最少的字符来表现下图所示bool实现代码/** * 时间范围内是否投放控制（周一至周日，0点至24点） * * @Author zouyou * @Date 2021/2/1 9:40 **/public class DateRange { private static final int WEEK_SIZE = 7; private static final int LEN = 42; private static final int WEEK_BIT_

2021-02-03 11:11:59 435

原创 N个连续数值内大换小，小换大算法

数值示例1, 2, 3, 4, 5 ,6 ,7, 8, 99, 8, 7, 6, 5, 4, 3, 2, 1替换示例N个顺序排列的数值，将其max(n, n-1, …min(m)) 与 min(n, n+1, …max(n)) 之间一一对照调换顺序1 <==> 92 <==> 83 <==> 74 <==> 65 <==> 56 <==> 47 <==> 38 <==> 29 &lt

2021-02-02 09:12:28 180

原创 Flink on yarn 使用Java API提交任务

资料来源：https://ci.apache.org/projects/flink/flink-docs-release-1.8/ops/deployment/yarn_setup.htmlyarn配置信息：https://ci.apache.org/projects/flink/flink-docs-release-1.8/ops/config.html#yarn...

2019-05-10 18:31:57 7134 14

原创 Kafka leader -1

问题现象在只有一个副本时，出现了broker节点丢失，因此导致了leader -1的情况解决方案直接修改zookeeper中该分区对应的stateset /brokers/topics/test_add_replication/partitions/1/state {"controller_epoch":140,"leader":1002,"version":1,"leader_epoc...

2019-05-10 12:02:31 5410 1

原创 Kafka的Producer报错：Fetching topic metadata with correlation id 0 for topics

问题在向Kafka生产消息时，报错：Fetching topic metadata with correlation id 0 for topics [Set(game-etl-finished-topic)] from broker [id:0,host:192.168.90.83,port:9093] failed排查过程出现问题之前做了一个操作：中断了一次消费程序后再生产数据...

2018-08-09 09:59:40 12660 1

原创 Java项目调用hadoop-lzop报错：native-lzo library not available

Java项目调用hadoop-lzop报错：native-lzo library not available服务器环境已安装好所有Hadoop相关的内容，但在java项目中使用hadoop-lzop的功能时依然报错错误内容：java.lang.RuntimeException: native-lzo library not available at com.hado...

2018-08-03 09:09:01 4520

u013933879的博客