中间件mycat入门(一):部署与介绍

最新推荐文章于 2024-08-27 18:14:10 发布
最新推荐文章于 2024-08-27 18:14:10 发布
阅读量1.2k 收藏 1
点赞数
分类专栏： MySQL中间件 文章标签： 中间件 mycat mysql 压测 jmeter
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_35339990/article/details/78723028
版权

初期测试过程中,原本采用kingshard中作为中间件的项目,但在测试的过程中，发现了不支持不同分表的join，只能选择放弃，改成mycat做测试

下载地址为

[root@gzsd-ks01-101110214 download]# wget http://dl.mycat.io/1.6.5/Mycat-server-1.6.5-release-20171117203123-linux.tar.gz
[root@gzsd-ks01-101110214 download]# tar xvf Mycat-server-1.6.5-release-20171117203123-linux.tar.gz
  • 需要有java的支持，这里直接使用yum进行安装
[root@gzsd-ks01-101110214 mycat]# yum -y install java
  • 将解压的目录放到标准目录中
[root@gzsd-ks01-101110214 download]# mv mycat /usr/local/
  • 查看对应的目录树
[root@gzsd-ks01-101110214 download]# tree /usr/local/mycat/
/usr/local/mycat/
├── bin
│   ├── dataMigrate.sh
│   ├── init_zk_data.sh
│   ├── mycat
│   ├── rehash.sh
│   ├── startup_nowrap.sh
│   ├── wrapper-linux-ppc-64
│   ├── wrapper-linux-x86-32
│   └── wrapper-linux-x86-64
├── catlet
├── conf
│   ├── autopartition-long.txt
│   ├── auto-sharding-long.txt
│   ├── auto-sharding-rang-mod.txt
│   ├── cacheservice.properties
│   ├── dbseq.sql
│   ├── ehcache.xml
│   ├── index_to_charset.properties
│   ├── log4j2.xml
│   ├── migrateTables.properties
│   ├── myid.properties
│   ├── partition-hash-int.txt
│   ├── partition-range-mod.txt
│   ├── rule.xml
│   ├── schema.xml
│   ├── sequence_conf.properties
│   ├── sequence_db_conf.properties
│   ├── sequence_distributed_conf.properties
│   ├── sequence_time_conf.properties
│   ├── server.xml
│   ├── sharding-by-enum.txt
│   ├── wrapper.conf
│   ├── zkconf
│   │   ├── autopartition-long.txt
│   │   ├── auto-sharding-long.txt
│   │   ├── auto-sharding-rang-mod.txt
│   │   ├── cacheservice.properties
│   │   ├── ehcache.xml
│   │   ├── index_to_charset.properties
│   │   ├── partition-hash-int.txt
│   │   ├── partition-range-mod.txt
│   │   ├── rule.xml
│   │   ├── schema.xml
│   │   ├── sequence_conf.properties
│   │   ├── sequence_db_conf.properties
│   │   ├── sequence_distributed_conf-mycat_fz_01.properties
│   │   ├── sequence_distributed_conf.properties
│   │   ├── sequence_time_conf-mycat_fz_01.properties
│   │   ├── sequence_time_conf.properties
│   │   ├── server-mycat_fz_01.xml
│   │   ├── server.xml
│   │   └── sharding-by-enum.txt
│   └── zkdownload
│       └── auto-sharding-long.txt
├── lib
│   ├── asm-4.0.jar
│   ├── commons-collections-3.2.1.jar
│   ├── commons-lang-2.6.jar
│   ├── curator-client-2.11.0.jar
│   ├── curator-framework-2.11.0.jar
│   ├── curator-recipes-2.11.0.jar
│   ├── disruptor-3.3.4.jar
│   ├── dom4j-1.6.1.jar
│   ├── druid-1.0.26.jar
│   ├── ehcache-core-2.6.11.jar
│   ├── fastjson-1.2.12.jar
│   ├── guava-19.0.jar
│   ├── hamcrest-core-1.3.jar
│   ├── hamcrest-library-1.3.jar
│   ├── jline-0.9.94.jar
│   ├── joda-time-2.9.3.jar
│   ├── jsr305-2.0.3.jar
│   ├── kryo-2.10.jar
│   ├── leveldb-0.7.jar
│   ├── leveldb-api-0.7.jar
│   ├── libwrapper-linux-ppc-64.so
│   ├── libwrapper-linux-x86-32.so
│   ├── libwrapper-linux-x86-64.so
│   ├── log4j-1.2.17.jar
│   ├── log4j-1.2-api-2.5.jar
│   ├── log4j-api-2.5.jar
│   ├── log4j-core-2.5.jar
│   ├── log4j-slf4j-impl-2.5.jar
│   ├── mapdb-1.0.7.jar
│   ├── minlog-1.2.jar
│   ├── mongo-java-driver-2.11.4.jar
│   ├── Mycat-server-1.6.5-release.jar
│   ├── mysql-binlog-connector-java-0.6.0.jar
│   ├── mysql-connector-java-5.1.35.jar
│   ├── netty-3.7.0.Final.jar
│   ├── netty-buffer-4.1.9.Final.jar
│   ├── netty-common-4.1.9.Final.jar
│   ├── objenesis-1.2.jar
│   ├── reflectasm-1.03.jar
│   ├── sequoiadb-driver-1.12.jar
│   ├── slf4j-api-1.6.1.jar
│   ├── univocity-parsers-2.2.1.jar
│   ├── velocity-1.7.jar
│   ├── wrapper.jar
│   └── zookeeper-3.4.6.jar
├── logs
│   └── wrapper.log
└── version.txt

7 directories, 96 files
  • 设置环境变量
[root@gzsd-ks01-101110214 download]# vim /etc/profile
MYCAT_HOME=/usr/local/mycat
[root@gzsd-ks01-101110214 download]# source /etc/profile
  • 修改server.xml文件
[root@gzsd-ks01-101110214 download]# vim $MYCAT_HOME/conf/server.xml 
 <?xml version="1.0" encoding="UTF-8"?>
<!-- - - Licensed under the Apache License, Version 2.0 (the "License"); 
    - you may not use this file except in compliance with the License. - You 
    may obtain a copy of the License at - - http://www.apache.org/licenses/LICENSE-2.0 
    - - Unless required by applicable law or agreed to in writing, software - 
    distributed under the License is distributed on an "AS IS" BASIS, - WITHOUT 
    WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. - See the 
    License for the specific language governing permissions and - limitations 
    under the License. -->
<!DOCTYPE mycat:server SYSTEM "server.dtd">
<mycat:server xmlns:mycat="http://io.mycat/">
    <system>
    <property name="nonePasswordLogin">0</property> <!-- 0为需要密码登陆、1为不需要密码登陆 ,默认为0，设置为1则需要指定默认账户-->
    <property name="useHandshakeV10">1</property>
    <property name="useSqlStat">1</property>  <!-- 1为开启实时统计、0为关闭 -->
    <property name="useGlobleTableCheck">0</property>  <!-- 1为开启全加班一致性检测、0为关闭 -->

        <property name="sequnceHandlerType">2</property>
    <property name="subqueryRelationshipCheck">false</property> <!-- 子查询中存在关联查询的情况下,检查关联字段中是否有分片字段 .默认 false -->
      <!--  <property name="useCompression">1</property>--> <!--1为开启mysql压缩协议-->
        <!--  <property name="fakeMySQLVersion">5.6.20</property>--> <!--设置模拟的MySQL版本号-->
    <!-- <property name="processorBufferChunk">40960</property> -->
    <!-- 
    <property name="processors">1</property> 
    <property name="processorExecutor">32</property> 
     -->
        <!--默认为type 0: DirectByteBufferPool | type 1 ByteBufferArena | type 2 NettyBufferPool -->
        <property name="processorBufferPoolType">0</property>
        <!--默认是65535 64K 用于sql解析时最大文本长度 -->
        <property name="maxStringLiteralLength">65535</property>
        <property name="sequnceHandlerType">0</property>
        <property name="backSocketNoDelay">1</property>
        <property name="frontSocketNoDelay">1</property>
        <!--<property name="processorExecutor">16</property>-->
        <!--
            <property name="serverPort">8066</property> <property name="managerPort">9066</property> 
            <property name="idleTimeout">300000</property> <property name="bindIp">0.0.0.0</property> 
            <property name="frontWriteQueueSize">4096</property> <property name="processors">32</property> -->
        <!--分布式事务开关，0为不过滤分布式事务，1为过滤分布式事务（如果分布式事务内只涉及全局表，则不过滤），2为不过滤分布式事务,但是记录分布式事务日志-->
        <property name="handleDistributedTransactions">0</property>

            <!--
            off heap for merge/order/group/limit      1开启   0关闭
        -->
        <property name="useOffHeapForMerge">1</property>

        <!--
            单位为m
        -->
        <property name="memoryPageSize">64k</property>

        <!--
            单位为k
        -->
        <property name="spillsFileBufferSize">1k</property>

        <property name="useStreamOutput">0</property>

        <!--
            单位为m
        -->
        <property name="systemReserveMemorySize">384m</property>


        <!--是否采用zookeeper协调切换  -->
        <property name="useZKSwitch">false</property>

        <!-- XA Recovery Log日志路径 -->
        <!--<property name="XARecoveryLogBaseDir">./</property>-->

        <!-- XA Recovery Log日志名称 -->
        <!--<property name="XARecoveryLogBaseName">tmlog</property>-->

    </system>

    <!-- 全局SQL防火墙设置 -->
    <!--白名单可以使用通配符%或着*-->
    <!--例如<host host="127.0.0.*" user="root"/>-->
    <!--例如<host host="127.0.*" user="root"/>-->
    <!--例如<host host="127.*" user="root"/>-->
    <!--例如<host host="1*7.*" user="root"/>-->
    <!--这些配置情况下对于127.0.0.1都能以root账户登录-->
    <!--
    <firewall>
       <whitehost>
          <host host="1*7.0.0.*" user="root"/>
       </whitehost>
       <blacklist check="false">
       </blacklist>
    </firewall>
    -->

    <user name="root" defaultAccount="true">
        <property name="password">123456</property>
        <property name="schemas">wms_output_0000</property>

        <!-- 表级 DML 权限设置 -->
        <!--        
        <privileges check="false">
            <schema name="TESTDB" dml="0110" >
                <table name="tb01" dml="0000"></table>
                <table name="tb02" dml="1111"></table>
            </schema>
        </privileges>       
         -->
    </user>

    <user name="user">
        <property name="password">user</property>
        <property name="schemas">wms_output_0000</property>
        <property name="readOnly">true</property>
    </user>

</mycat:server>
  • 修改schema.xml文件
[root@gzsd-ks01-101110214 download]# vim $MYCAT_HOME/conf/schema.xml 
<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">

    <schema name="wms_output_0000" checkSQLschema="false" sqlMaxLimit="100" dataNode="dn1">
            <table name="wmp_so_package" primaryKey="id" autoIncrement="true" subTables="wmp_so_package$1-128" type="global" dataNode="dn1" rule="mod-long" />
            <table name="wmp_sale_order" primaryKey="id" autoIncrement="true" subTables="wmp_sale_order$1-128" type="global" dataNode="dn1" rule="mod-long" />
    </schema>
    <dataNode name="dn1" dataHost="cluster1" database="wms_output_0000" />
    <dataHost name="cluster1" maxCon="1000" minCon="10" balance="0"  writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">
        <heartbeat>select user()</heartbeat>
        <writeHost host="hostM1" url="10.11.10.215:3306" user="gz_mycat_account"  password="alo!7TTg@123">
        <readHost host="hostS1" url="10.11.10.216:3306" user="gz_mycat_account" password="alo!7TTg@123" />
        </writeHost>
    </dataHost>
</mycat:schema>
  • 修改rule.xml文件
[root@gzsd-ks01-101110214 download]# vim $MYCAT_HOME/conf/rule.xml 
<?xml version="1.0" encoding="UTF-8"?>
<!-- - - Licensed under the Apache License, Version 2.0 (the "License"); 
    - you may not use this file except in compliance with the License. - You 
    may obtain a copy of the License at - - http://www.apache.org/licenses/LICENSE-2.0 
    - - Unless required by applicable law or agreed to in writing, software - 
    distributed under the License is distributed on an "AS IS" BASIS, - WITHOUT 
    WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. - See the 
    License for the specific language governing permissions and - limitations 
    under the License. -->
<!DOCTYPE mycat:rule SYSTEM "rule.dtd">
<mycat:rule xmlns:mycat="http://io.mycat/">
    <tableRule name="mod-long">
        <rule>
            <columns>id</columns>
            <algorithm>mod-long</algorithm>
        </rule>
    </tableRule>

    <function name="mod-long" class="io.mycat.route.function.PartitionByMod">
        <!-- how many data nodes -->
        <property name="count">128</property>
    </function>

</mycat:rule>
  • 启动
[root@gzsd-ks01-101110214 download]# cd $MYCAT_HOME 
[root@gzsd-ks01-101110214 mycat]# ./bin/mycat start
Starting Mycat-server...
  • 查看端口
[root@gzsd-ks01-101110214 mycat]# netstat -lntp
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name    
tcp        0      0 0.0.0.0:22              0.0.0.0:*               LISTEN      878/sshd            
tcp        0      0 127.0.0.1:25            0.0.0.0:*               LISTEN      1349/master         
tcp        0      0 127.0.0.1:32000         0.0.0.0:*               LISTEN      12104/java          
tcp6       0      0 :::9066                 :::*                    LISTEN      12104/java          
tcp6       0      0 :::16305                :::*                    LISTEN      12104/java          
tcp6       0      0 :::22                   :::*                    LISTEN      878/sshd            
tcp6       0      0 ::1:25                  :::*                    LISTEN      1349/master         
tcp6       0      0 :::42620                :::*                    LISTEN      12104/java          
tcp6       0      0 :::1984                 :::*                    LISTEN      12104/java          
tcp6       0      0 :::8066                 :::*                    LISTEN      12104/java

配置完成后，即可使用客户端工具连接进行操作。
启动之前，需要明确的一个点就是，指定的库和指定的分表个数，一定要先在DB上创建了先。schema.xml和rule分别对应，在这里，有两个分表，分表均为128张表，即

分表库数目说明
wmp_so_packagewms_output_0000128schema.xml配置
wmp_sale_orderwms_output_0000128schema.xml配置

启动的时候，可能会碰到如下问题

FATAL  | wrapper  | 2017/12/05 17:21:16 | There were 5 failed launches in a row, each lasting less than 300 seconds.  Giving up.
FATAL  | wrapper  | 2017/12/05 17:21:16 |   There may be a configuration problem: please check the logs.
STATUS | wrapper  | 2017/12/05 17:21:16 | <-- Wrapper Stopped

出现这种问题的解决办法是在hosts中加入对应的信息
这里写图片描述
如果还有其他问题，则可以打开debug进行查证
这里写图片描述

熊出陌
关注
专栏目录
Mycat【什么是Mycat、Mycat与其他中间件区别、Mycat应用场景、核心概念详解、Mycat原理】(一)-全面详解（学习总结---从入门到深化）
07-06 2906
Mycat【什么是Mycat、Mycat与其他中间件区别、Mycat应用场景、核心概念详解、Mycat原理】(一)-全面详解（学习总结---从入门到深化）
（七）mysql中间件mycat配置和部署（基于M-M-S-S）
Until_U的博客
04-20 713
CONTEND 7.1DB Proxy数据库中间件概述 7.2mycat概述 7.3 配置java环境 7.4 mycat安装部署 7.4.1 下载mycat和相关驱动 7.4.2修改配置文件 7.4.3 master1上开启授权账号 7.5开启mycat并测试 7.1DB Proxy数据库中间件概述 （1）DB Proxy的应用场景，APPserver端不需要...
中间件、数据库安装部署
03-17
根据公司常用环境自己编写的安装部署手册，主要针对weblogic10.3、websphere6.1.2两种中间件和oracle10g数据库编写
数据库中间件---mycat--1、简介
初学者
03-31 296
一：是什么 1、数据库中间件 中间件：是一类连接软件组件和应用的计算机软件，以便于软件各部件之间的沟通。 例子：Tomcat，web中间件。 数据库中间件：连接java应用程序和数据库 2、为什么要用Mycat？ Java与数据库紧耦合。 高访问量高并发对数据库的压力。 读写请求数据不一致 3、数据库中间件对比 中间件 说明 Cobar 属于阿里B2B事业群，始于2008年，...
中间件部署
最新发布
weixin_49618170的博客
08-27 253
docker部署redis
mycat中间件（一）描述
YuYunTan的专栏
11-14 3075
前言 mycat概述 数据库切分概述 OLTP 和OLAP 关系型数据库和Nosql数据库 优缺点比较 数据切分 概念 数据的垂直纵向切分 优点 缺点 数据的水平横向切分 优点 缺点 数据切分四原则 Mycat中概念 数据库中间件 逻辑库schema 逻辑表table 分片表 非分片表 E-R表 全局表 分片节点dataNode 节点主机dataHost 分片规则rule 全局序列号sequence
【mysql数据库】mycat中间件
翡翠泪滴的博客
05-30 1637
Mycat 是数据库 中间件。 ### 2、 为什么要用 Mycat ① Java 与数据库紧耦合 。 ② 高访问量高并发对数据库的压力 。 ③ 读 写请求数据不一致。
MyCat介绍
qq_29860591的博客
01-10 198
Mycat 是数据库中间件1 数据库中间件中间件：是一类连接软件组件和应用的计算机软件，以便于软件各部件之间的沟通。例子：Tomcat，web中间件。数据库中间件：连接java应用程序和数据库2 为什么要用Mycat ？① Java与数据库紧耦合。② 高访问量高并发对数据库的压力。③ 读写请求数据不一致3 数据库中间件对比 ① Cobar属于阿里B2B事业群，始于2008年...
mycat配置入门：快速搭建基本的数据库集群
Mycat是一个开源的数据库中间件，提供数据库集群、分片、读写分离等功能，可以有效地提升数据库的性能和扩展性。 ## 1.2 目标和意义 搭建Mycat数据库集群可以实现数据库的分布式存储和高可用性，提高系统的稳定性...
Mycat从入门到精通之Mycat性能测试与调优.zip
04-25
《Mycat从入门到精通之Mycat性能测试与调优》教程涵盖了数据库分片中间件Mycat的核心知识，旨在帮助用户深入理解和掌握Mycat的性能优化技巧。以下是对这一主题的详细解析： 一、Mycat简介 Mycat是一款开源的分布式...
Mycat从入门到精通之原理与入门、基本功能、配置.zip
04-25
《Mycat从入门到精通之原理与入门、基本功能、配置》教程是针对数据库分片中间件Mycat的一款详尽学习资料。Mycat作为一款开源的分布式数据库系统，广泛应用于大型互联网企业的高并发场景，能有效解决单机数据库无法...
weblogic中间件部署工程
04-26
Linux系统安装weblogic及部署环境流程 1 创建用户组及用户 2 安装weblogic程序 3 建立weblogic的domain
中间件集群部署
Spider_Man06的博客
01-06 1628
一、安装jdk1.8 先卸载系统自带jdk #查找系统自带jdk rpm -qa | grep java #卸载jdk yum -y remove java* #卸载完成 解压安装jdk tar -zxvf jdk-8u221-linux-x64.tar.gz #删除tar包 rm -rf jdk-8u221-linux-x64.tar.gz 配置系统环境变量 vim /etc/profile #在尾部添加环境变量 export JAVA_HOME=/data/jdk1.8.0_221 ex
部署中间件mysql、redis、nginx
智障儿童欢乐多
05-23 2254
部署中间件 2021-05-23 文章目录部署中间件一、知识点汇总1 yum、systemctl命令介绍2 make使用二 、mysql1 下载mysql安装包并上传至服务器2 卸载CentOS7系统自带mariadb3 解压并安装mysql离线安装包4 服务启停5 数据库操作三、redis1 redis 简介2 离线部署(1)安装gcc(2)下载redis包(3)编译安装到指定目录(4)启动redis(5)设置开机自启动并添加到系统服务(6)测试部署是否成功四：nginx1 简介 nignx2 部署
【云原生】3.3 Kubernetes 中间件部署实战
m0_61083409的博客
07-28 809
在前面呢，我们做了一个多租户系统，这次用上次的一个普通用户登入进去系统。我们如何在云上部署一个应用？是以什么样的方式？该应用又是什么样子？在KubeSphere里面有个叫工作负载里面有部署、有状态副本集、守护进程集，对应的就是以前的部署（Deployment）、有状态副本集（StatefulSet）、守护进程集（DaemonSet）一个项目总会有数据吧？数据存那里呢？在前面我们讲过，很明显直接存在数据卷里面（PVC），例如MySQL的数据。...
mysql集群 mycat_mysql分布式集群mycat部署
weixin_36018119的博客
01-19 222
1、mycat分布式规划：1.1 节点主从规划：箭头指向谁是主库10.0.0.51:3307 10.0.0.52:330710.0.0.51:3309 ------> 10.0.0.51:330710.0.0.52:3309 ------> 10.0.0.52:330710.0.0.52:3308 10.0.0.51:330810.0.0.52:33...
常用中间件的安装与安全部署（Nginx和Tomcat）
m0_64831368的博客
06-27 553
到server.xml文件下，配置Cnotext标签，path为空，docBase放默认根目录的地址，debug设置为0；2.在conf->web.xml 下面修改默认文件，选择你的默认文件，把原来的注释掉。1.按照程序一步步安装以后，配置环境变量：这个变量值填安装的路径，不要有中文！可以看到下面我上传了war文件，但是没有得到部署的文件夹，说明成功了！这两条语句可以通过在上卖弄框框内复制而来，修改一下就可以了！可以看到，可以正常访问我们创建的默认文件！可以看到，默认文件被我们替换掉了！
KubeSphere学习---Mysql中间件安装部署实战
m0_57776598的博客
04-09 1544
前言 上一篇讲解了KubeSphere的多租户系统，并创建了众多用户，和众多项目，其中我们挑选:"dev-zhao"用户，和"his"项目来进行中间件的部署和学习。 应用部署需要关注的要素 因为这里我的KubeSphere是基于Kubernetes上部署的。那么我们在部署中间件的时候就和在Kubernetes上一样，比如： 1、应用的部署方式：你是使用无状态工作负载？还是有状态负载？或者说是守护进程式的负载？使 无状态负载：适用于部署个Nginx，Httpd等不需要后端数存储的。 有状态负载：用于部署My.
MyCat - 使用篇（6）
anzhen0429的博客
06-01 195
数据库路由中间件MyCat - 使用篇（6）配置MyCat-eye接下来在开始使用MyCat之前，我们先把监控平台部署好。下载MyCat-eye项目，mvn打包。之后得到类似于Mycat-web-1.0-SNAPSHOT-20160215151602-linux.tar.gz这个文件，部署到和zookeeper同一台服务器上。 如果要部署到其他机器，需要修改mycat-web\mycat...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值