Hongyu_Liu的博客

背景 数据迁移是数据库运维中一个很常见的场景。数据迁移分为全量和增量。为了追求速度，通常我们会采用并发的方式对数据进行全量迁移。在全量导出数据时，通常都会选择做到记录级的并发，因此通常会涉及到对需要导出的某个表（集合）按照并发度进行切分（分区）的过程。现有常用做法是通过若干个skip加limit来找到一些分区点，然后就可以并发同时导出多个分区。事实上MongoDB还有一个SplitVec...

Cassandra Query Language (CQL)v3.3.0 1.        Cql语法 1.1.    前言 本文档描述了CQL v3。CQL v3与CQL v2不兼容且在很多地方不同。 CQL v3提供了非常类似于SQL的数据模型，数据放在了包含rows和co...

ES集群环境搭建1.检查jdk，准备安装包，确定安装路径2.创建es用户 ：​ adduser elasticsearch3.修改配置文件：​ vim config/elasticsearch.yml#配置es的集群名称，默认是elasticsearch，#es会自动发现在同一网段下的es，# 如果在同一网段下有多个集群，就可以用这个属性来区分不同的集群。cluster.name: cell## ------------------------------------ Node -

zk环境搭建1.检查jdk，准备安装包，确定安装路径2.解压安装包到指定目录3.修改配置文件 zoo.cfg①、tickTime：基本事件单元，这个时间是作为Zookeeper服务器之间或客户端与服务器之间维持心跳的时间间隔，每隔tickTime时间就会发送一个心跳；最小 的session过期时间为2倍tickTime②、dataDir：存储内存中数据库快照的位置，除非另有说明，否则指向数据库更新的事务日志。注意：应该谨慎的选择日志存放的位置，使用专用的日志存储设备能够大大提高系统的性能，如果将

安装jdk1.检查是否有自带的jdk：​ #java -version​ 如果有的话删除：​ #rpm -qa | grep java​ #rpm -e --nodeps XXXXXX如果删除不干净：yum -y remove XXXXXX2.准备安装包，到安装目录下解压安装包：​ #tar -zxvf jdkXXXX.tar.gz3.配置环境变量：​ #vim /etc/profile​ 文末添加：# java environmentexport JAVA_HOME=/usr/

备用密码：Sdzhsq#2019!@#Jm$t3HBHQy7tymOI#FrcCkgsfNlnLKdmmore /etc/profile端口8000-10000manager用户免密(已完成)， jdk（已完成）， redis（88单点已完成）， zk（已完成）防火墙安装包目录：/home/manager/soft安装目录：/usr/local/免密（已完成）：生成密钥(输入命令之后能看懂提示就根据提示来，看不懂没关系一路回车就行，生成的密钥默认保存在当前用户的家目录下的.ssh文件夹下)[l