李成笔记网

专注域名、站长SEO知识分享与实战技巧

Mycat1.6版部署mysql读写分离 mysql读写分离原理详解

一 说明

官网:http://www.mycat.org.cn/

安装包下载:http://dl.mycat.org.cn/

注:1.6的bug: 批处理插入,多语句,堆外合拼

环境说明:系统:centos7.9 目录:/data

二 部署

1/部署mycat1.6版本

需要先安装jdk-1.8的版本,如下是查看jdk版本。

[root@HK_192_168_5_112 bin]# java -version
java version "1.8.0_202"
Java(TM) SE Runtime Environment (build 1.8.0_202-b08)
Java HotSpot(TM) 64-Bit Server VM (build 25.202-b08, mixed mode)

jdk安装脚本和程序包,下载地址:

链接:https://pan.baidu.com/s/17il2Od_Gwfu4iYVxLtMuhQ
提取码:o9un 

2/解压

[root@zwf_10_10_11_22 src]# tar -zxvf Mycat-server-1.6-RELEASE-20161028204710-linux.tar.gz

3/部署到/data目录

[root@zwf_10_10_11_22 src]#mv mycat   /data/

4/修改配置文件

schema文件配置mysql数据库源地址

server.xml配置访问mycat的用户密码等参数

mycat分片这里不说明rule.xml

[root@zwf_10_10_11_22 src]#cd /data/mycat/conf
[root@zwf_10_10_11_22 data]#cp schema.xml   schema.xml_bak  //备份文件
[root@zwf_10_10_11_22 data]#cp server.xml     server.xml_bak  //备份文件

schema说明

<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">
	<!--
	name:为mycat逻辑库的名字,对应server<property name="schemas">mydatabase</property>,
	建议设置跟数据库一样的名称
	dataNode:为主机名称,如果有多台用分号  如 “dn1,dn2,dn3”
	checkSQLschema:自动检查逻辑库名称并拼接,true会在sql语句中的表名前拼接逻辑库名,
	例如select * from mydatabase.t_user;
	sqlMaxLimit:查询保护、如果没有写limit条件,会自动拼接。只查询100条。
	-->

        <schema name="workdb" dataNode="dn1" checkSQLschema="false" sqlMaxLimit="100">
        </schema>

        <schema name="db1" dataNode="dn2" checkSQLschema="false" sqlMaxLimit="100">
        </schema>
        
		<!-- name:节点名称,用于在table标签里面调用
		dataHost:dataHost标签name值(<dataHost name="dtHost1">)
		database:物理数据库名,需要提前创建好实际存在的-->

        <dataNode name="dn1" dataHost="localhost1" database="workdb" />
        <dataNode name="dn2" dataHost="localhost1" database="db1" />

<!--
	name:节点名称,在上方dataNode标签中调用
	maxCon:底层数据库的链接最大数
	minCon:底层数据库的链接最小数
	balance:值可以为0,1,2,3,分别表示对当前datahost中维护的数据库们的读操作逻辑
	0:不开启读写分离,所有的读写操作都在最小的索引号的writeHost(第一个writeHost标签)
	1:全部的readHost和备用writeHost都参与读数据的平衡,如果读的请求过多,负责写的第一个writeHost也分担一部分
	2 :所有的读操作,都随机的在所有的writeHost和readHost中进行
	3 :所有的读操作,都到writeHost对应的readHost上进行(备用writeHost不参加了),在集群中没有配置ReadHost的情况下,读都到第
	一个writeHost完成
	writeType:控制当前datahost维护的数据库集群的写操作
	0:所有的写操作都在第一个writeHost标签的数据库进行
	1:所有的写操作,都随机分配到所有的writeHost(mycat1.5完全不建议配置了)
	dbtype:数据库类型(不同数据库配置不同名称,mysql)
	dbDriver:数据库驱动,native,动态获取
	switchType:切换的逻辑
	-1:故障不切换
	1:故障切换,当前写操作的writeHost故障,进行切换,切换到下一个writeHost;
	slaveThreshold:标签中的<heartbeat>用来检测后端数据库的心跳sql语句;本属性检查从节点与主节点的同步情况(延迟时间数),配合心
	跳语句show slave status; 读写分离时,所有的readHost的数据都可靠
	-->

        <dataHost name="localhost1" maxCon="1000" minCon="10" balance="1"
                          writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100">
                 
                 <!--用于验证心跳,这个是mysql主库的配置-->
                <heartbeat>select user()</heartbeat>

                 <!--witeHost 主库写的,readHost 从库读的-->
                <writeHost host="hostM1" url="10.10.11.120:3306" user="root" password="123456">
                        <readHost host="hostS1" url="10.10.11.121:3306" user="root" password="123456" />
                </writeHost>
                <writeHost host="hostM2" url="10.10.11.21:3306" user="root" password="123456">
                        <readHost host="hostS2" url="10.10.11.22:3306" user="root" password="123456" />
                </writeHost>
        </dataHost>


</mycat:schema>

server.xml说明

[root@zwf_10_10_11_22 conf]# cat server.xml  
<?xml version="1.0" encoding="UTF-8"?>
<!-- - - Licensed under the Apache License, Version 2.0 (the "License"); 
        - you may not use this file except in compliance with the License. - You 
        may obtain a copy of the License at - - http://www.apache.org/licenses/LICENSE-2.0 
        - - Unless required by applicable law or agreed to in writing, software - 
        distributed under the License is distributed on an "AS IS" BASIS, - WITHOUT 
        WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. - See the 
        License for the specific language governing permissions and - limitations 
        under the License. -->
<!DOCTYPE mycat:server SYSTEM "server.dtd">
<mycat:server xmlns:mycat="http://io.mycat/">
        <system>
        <property name="nonePasswordLogin">0</property> <!-- 0为需要密码登陆、1为不需要密码登陆 ,默认为0,设置为1则需要指定默认账户-->
        <property name="ignoreUnknownCommand">0</property><!-- 0遇上没有实现的报文(Unknown command:),就会报错、1为忽略该报文,返回ok报文。
        在某些mysql客户端存在客户端已经登录的时候还会继续发送登录报文,mycat会报错,该设置可以绕过这个错误-->
        <property name="useHandshakeV10">1</property>
    <property name="removeGraveAccent">1</property>
        <property name="useSqlStat">1</property>  <!-- 1为开启实时统计、0为关闭 -->
        <property name="useGlobleTableCheck">0</property>  <!-- 1为开启全加班一致性检测、0为关闭 -->
        <property name="sqlExecuteTimeout">300</property>  <!-- SQL 执行超时 单位:秒-->
                <property name="sequenceHandlerType">1</property>
        <!--<property name="sequnceHandlerPattern">(?:(\s*next\s+value\s+for\s*MYCATSEQ_(\w+))(,|\)|\s)*)+</property>
        INSERT INTO `travelrecord` (`id`,user_id) VALUES ('next value for MYCATSEQ_GLOBAL',"xxx");
        -->
        <!--必须带有MYCATSEQ_或者 mycatseq_进入序列匹配流程 注意MYCATSEQ_有空格的情况-->
        <property name="sequnceHandlerPattern">(?:(\s*next\s+value\s+for\s*MYCATSEQ_(\w+))(,|\)|\s)*)+</property>
        <property name="subqueryRelationshipCheck">false</property> <!-- 子查询中存在关联查询的情况下,检查关联字段中是否有分片字段 .默认 false -->
        <property name="sequenceHanlderClass">io.mycat.route.sequence.handler.HttpIncrSequenceHandler</property>
      <!--  <property name="useCompression">1</property>--> <!--1为开启mysql压缩协议-->
        <!--  <property name="fakeMySQLVersion">5.6.20</property>--> <!--设置模拟的MySQL版本号-->
        <!-- <property name="processorBufferChunk">40960</property> -->
        <!-- 
        <property name="processors">1</property> 
        <property name="processorExecutor">32</property> 
         -->
        <!--默认为type 0: DirectByteBufferPool | type 1 ByteBufferArena | type 2 NettyBufferPool -->
                <property name="processorBufferPoolType">0</property>
                <!--默认是65535 64K 用于sql解析时最大文本长度 -->
                <property name="maxStringLiteralLength">65535</property>
                <property name="sequenceHandlerType">0</property>
                <property name="backSocketNoDelay">1</property>
                <property name="frontSocketNoDelay">1</property>
                <!--<property name="processorExecutor">16</property>-->
                <!--
                        <property name="serverPort">8066</property>
                        <!--定义 mycat 的使用端口,默认值为 8066。 -->
                        <property name="managerPort">9066</property>
                        <!--定义 mycat 的管理端口,默认值为 9066。 -->
                        <property name="idleTimeout">300000</property>
                        <property name="authTimeout">15000</property>
                        <property name="bindIp">0.0.0.0</property>
                        <property name="dataNodeIdleCheckPeriod">300000</property> 5 * 60 * 1000L; //连接空闲检查
                        <property name="frontWriteQueueSize">4096</property> <property name="processors">32</property> -->
                <!--分布式事务开关,0为不过滤分布式事务,1为过滤分布式事务(如果分布式事务内只涉及全局表,则不过滤),2为不过滤分布式事务,但是记录分布式事务日志-->
                <property name="handleDistributedTransactions">0</property>

                        <!--
                        off heap for merge/order/group/limit      1开启   0关闭
                -->
                <property name="useOffHeapForMerge">0</property>

                <!--
                        单位为m
                -->
        <property name="memoryPageSize">64k</property>

                <!--
                        单位为k
                -->
                <property name="spillsFileBufferSize">1k</property>

                <property name="useStreamOutput">0</property>

                <!--
                        单位为m
                -->
                <property name="systemReserveMemorySize">384m</property>


                <!--是否采用zookeeper协调切换  -->
                <property name="useZKSwitch">false</property>

                <!-- XA Recovery Log日志路径 -->
                <!--<property name="XARecoveryLogBaseDir">./</property>-->

                <!-- XA Recovery Log日志名称 -->
                <!--<property name="XARecoveryLogBaseName">tmlog</property>-->
                <!--如果为 true的话 严格遵守隔离级别,不会在仅仅只有select语句的时候在事务中切换连接-->
                <property name="strictTxIsolation">true</property>
                <!--如果为0的话,涉及多个DataNode的catlet任务不会跨线程执行-->
                <property name="parallExecute">0</property>
                <property name="serverBacklog">2048</property>
        </system>

        <!-- 全局SQL防火墙设置 -->
        <!--白名单可以使用通配符%或着*-->
        <!--例如<host host="127.0.0.*" user="root"/>-->
        <!--例如<host host="127.0.*" user="root"/>-->
        <!--例如<host host="127.*" user="root"/>-->
        <!--例如<host host="1*7.*" user="root"/>-->
        <!--这些配置情况下对于127.0.0.1都能以root账户登录-->
        <!--
        <firewall>
           <whitehost>
              <host host="1*7.0.0.*" user="root"/>
           </whitehost>
       <blacklist check="false">
       </blacklist>
        </firewall>
        -->

        <user name="hkwrite" defaultAccount="true">
                <property name="password">hkabcdefwrite</property>
                <property name="schemas">aaa,aaaa,aaaaaa,aaaaaaaaa</property>
                <!--<property name="defaultSchema">TESTDB</property>-->
                <!--No MyCAT Database selected 错误前会尝试使用该schema作为schema,不设置则为null,报错 -->
                <!-- 
                <privileges check="false">
                        <schema name="TESTDB" dml="0110" >
                                <table name="tb01" dml="0000"></table>
                                <table name="tb02" dml="1111"></table>
                <!--  对用户的 schema以及表进行精细化的DML权限控制 -->
                <!--check 表示是否开启DML权限检查。默认是关闭。 -->
                <!----dml 顺序说明:insert,update,select,delete  0关 1开 -->
                        </schema>
                </privileges>
                 -->
        </user>

        <user name="hkreaddz">
                <property name="password">hxxxxxxxxxxxread</property>
                <property name="schemas">aaa,aaaa,aaaaaa,aaaaaaaaa</property>
                <property name="readOnly">true</property>
                <!--user 用户配置节点-->
                <!--name 登录的用户名,也就是连接Mycat的用户名-->
                <!--password 登录的密码,也就是连接Mycat的密码-->
                <!--schemas 数据库名,这里会和schema.xml中的配置关联,多个用逗号分开,例如需要这个用户需要管理两个数据库db1,db2,则配置db1,dbs-->
        </user>

</mycat:server>

5/报错编写打印日志

vi /data/mycat/conf/log4j2.xml
level属性配置mycat 日志级别
<asyncRoot level="debug" includeLocation="true">
  说明日志级别: all < trace < debug < info < warn < error < fatal < off

6/设置文件权限

[root@zwf_10_10_11_22 bin]# chmod +x *
[root@zwf_10_10_11_22 bin]# ll
总用量 384
-rwxr-xr-x 1 root root   3658 8月  11 2022 dataMigrate.sh
-rwxr-xr-x 1 root root   1272 8月  11 2022 init_zk_data.sh
-rwxr-xr-x 1 root root  15701 8月  11 2022 mycat
-rwxr-xr-x 1 root root   2986 8月  11 2022 rehash.sh
-rwxr-xr-x 1 root root   2526 8月  11 2022 startup_nowrap.sh
-rwxr-xr-x 1 root root 140198 8月  11 2022 wrapper-linux-ppc-64
-rwxr-xr-x 1 root root  99401 8月  11 2022 wrapper-linux-x86-32
-rwxr-xr-x 1 root root 111027 8月  11 2022 wrapper-linux-x86-64

7/运行相关

cd mycat/bin
./mycat start 启动
./mycat stop 停止
./mycat console 前台运行
./mycat install 添加到系统自动启动(暂未实现)
./mycat remove 取消随系统自动启动(暂未实现)
./mycat restart 重启服务
./mycat pause 暂停
./mycat status 查看启动状态

8/使用Navicat连接

主机:为mycat 的主机
端口:8066 为mycat端口
用户名为:mycat
密码:123456

9/其他

报错1

wrapper | --> Wrapper Started as Console
wrapper | Launching a JVM...
wrapper | JVM exited while loading the application.
jvm 1 | Java HotSpot(TM) 64-Bit Server VM warning: ignoring option MaxPermSize=64M; support was removed in 8.0
jvm 1 | Java HotSpot(TM) 64-Bit Server VM warning: INFO: os::commit_memory(0x00000006c0000000, 357892096, 0) failed; error='Cannot allocate memory' (errno=12)
解决办法

进入mycat的conf目录下修改wrapper.conf文件,具体修改如下:

wrapper.java.additional.10=-Xmx1G
wrapper.java.additional.11=-Xms256M

发表评论:

控制面板
您好,欢迎到访网站!
  查看权限
网站分类
最新留言