Amoeba实现mysql主从读写分离1

时间:2022-09-20 14:50:42
这段在网上看了下关于amoeba的文章,总体感觉好像要比mysql-proxy好的多,也参考了不少的资料,此文章可能与其他文章作者会有雷同的地方,请谅解,但是此过程确实是本人亲自试验得来的. 

试验环境

操作系统:  SUSE Linux Enterprise Server 10 (x86_64)

 

服务器IP:  10.10.0.72  10.10.0.77  10.10.0.87

 

服务器角色:  10.10.0.72作为mysqlmaster服务器, 0.77作为mysqlslave服务

             ,0.87作为amoeba服务器

 

软件列表:    MySQL-client-community-5.1.54-1.sles10.i586.rpm

             MySQL-server-community-5.1.54-1.sles10.i586.rpm

             amoeba-mysql-1.3.1-BETA.zip

             jdk-1_5_0_16-linux-i586-rpm.bin

Amoeba的简介

Amoeba(变形虫)项目,专注分布式数据proxy 开发.座落与ClientDB Server(s)之间.对客户端透明.具有负载均衡、高可用性、sql过滤、读写分离、可路由相关的query到目标数据库、可并发请求多台数据库合并结果.

 

主要解决了哪些问题:

降低数据切分带来的复杂多数据库结构

提供切分规则并降低数据切分规则给应用带来的影响

降低db 与客户端的连接数

读写分离

 

这里关于mysql的安装就不说了,网上的教程比较多.

实现mysql的主从复制

master服务器上执行如下命令:

#mysql �Curoot �Cptest

mysql> grant replication slave,file on *.* to 'sxit'@'10.10.0.77' identified by '123456';

mysql> flush privileges;

mysql> exit;

 

//修改mastermy.cnf的配置

 

log-bin=mysql-bin            //打开mysql二进制日志
server-id = 1                //设置mysql_id,主从不能相同
binlog-do-db=test            //设置二进制日志记录的库
sync_binlog=1      

 

//修改slavemy.cnf的配置

 

log-bin=mysql-bin
server-id = 2
replicate-do-db=test          //
设置同步的库
log-slave-updates            //
同步后记录二进制日志   
sync_binlog=1
slave-net-timeout=60

 

分别重启主从mysqld服务,登录master服务器.

 

master服务器上执行如下命令

 

# mysql �Cu root �Cptest

mysql>  flush tables with read lock;

mysql>  show master status\G;

 

*************************** 1. row ***************************

 File: mysql-bin.000002

 Position: 106

 Binlog_Do_DB: test

Binlog_Ignore_DB:

 

mysql> unlock tables;

 

登陆到slave服务器,执行如下命令:

 

# mysql �Cu root �Cptest

 

mysql>  stop slave;

 

mysql> change master to master_host='10.10.0.72', master_user='sxit', master_password='123456',

       master_log_file='mysql-bin.000002',master_log_pos=106;

 

mysql>  start slave;

 

mysql>  show slave status\G;

 

如果出现下面的情况,说明主从同步已经成功!

Slave_IO_Running: Yes

Slave_SQL_Running: Yes

安装amoeba

由于amoeba基于JDK1.5开发的,采用了JDK1.5的特性,所以我们这里要安装JDK,10.10.0.87服务器上安装相关程序

 

# chmod +x jdk-1_5_0_16-linux-i586-rpm.bin

# ./ jdk-1_5_0_16-linux-i586-rpm.bin

#  vi /etc/profile          //在文件里面添加jdk的环境变量,添加内容如下

 

JAVA_HOME=/usr/java/jdk1.5.0_16

export JAVA_HOME

PATH=$JAVA_HOME/bin:$PATH

export PATH

CLASSPATH=$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jar:$CLASSPATH

export CLASSPATH

 

# source  /etc/profile

 

# mkdir amoeba

# cd  /usr/local/amoeba

# unzip amoeba-mysql-1.3.1-BETA.zip

# chmod -R +x /usr/local/amoeba/bin/

 

Amoeba For MySQL 的使用非常简单,所有的配置文件都是标准的XML 文件,总共有四个配置文件.分别为:

 

amoeba.xml:主配置文件,配置所有数据源以及Amoeba自身的参数设置,实现主从的话配

   置这个文件就可以了;

 

rule.xml:配置所有Query 路由规则的信息;

 

functionMap.xml:配置用于解析Query 中的函数所对应的Java 实现类;

 

rullFunctionMap.xml:配置路由规则中需要使用到的特定函数的实现类;

 

通过更改amoeba.xml配置文件实现mysql主从读写分离,配置如下: <?xml version="1.0" encoding="gbk"?>

 

<!DOCTYPE amoeba:configuration SYSTEM "amoeba.dtd">

<amoeba:configuration xmlns:amoeba="http://amoeba.meidusa.com/">

 

        <server>

                <!-- proxy server绑定的端口 -->

                <property name="port">8066</property>

 

                <!-- proxy server绑定的IP -->

                <property name="ipAddress">10.10.0.87</property>

                <!-- proxy server net IO Read thread size -->

                <property name="readThreadPoolSize">20</property>

 

                <!-- proxy server client process thread size -->

                <property name="clientSideThreadPoolSize">30</property>

 

                <!-- mysql server data packet process thread size -->

                <property name="serverSideThreadPoolSize">30</property>

 

                <!-- socket Send and receive BufferSize(unit:K)  -->

                <property name="netBufferSize">128</property>

 

                <!-- Enable/disable TCP_NODELAY (disable/enable Nagle's algorithm). -->

                <property name="tcpNoDelay">true</property>

 

                <!-- 对外验证的用户名 -->

                <property name="user">root</property>

 

                <!-- 对外验证的密码 -->

              

                <property name="password">sxit</property>

 

                <!-- query timeout( default: 60 second , TimeUnit:second) -->

                <property name="queryTimeout">60</property>

        </server>

 

        <!--

                每个ConnectionManager都将作为一个线程启动。

                manager负责Connection IO读写/死亡检测

        -->

        <connectionManagerList>

           <connectionManager name="defaultManager" class="com.meidusa.amoeba.net.MultiConnectionManagerWrapper">

  <property name="subManagerClassName">com.meidusa.amoeba.net.AuthingableConnectionManager

</property>

     <!--

       default value is avaliable Processors

         <property name="processors">5</property>

     -->

</connectionManager>

</connectionManagerList>

 

<dbServerList>

     <!--

        一台mysqlServer 需要配置一个pool

        如果多台 平等的mysql需要进行loadBalance

        平台已经提供一个具有负载均衡能力的objectPoolcom.meidusa.amoeba.mysql.server.MultipleServerPool

         简单的配置是属性加上 virtual="true",Pool 不允许配置factoryConfig

         或者自己写一个ObjectPool

     -->

<dbServer name="server1">

 

     <!-- PoolableObjectFactory实现类 -->

        <factoryConfig class="com.meidusa.amoeba.mysql.net.MysqlServerConnectionFactory">

             <property name="manager">defaultManager</property>

 

                <!-- 真实mysql数据库端口 -->

                     <property name="port">3306</property>

 

                <!-- 真实mysql数据库IP -->

                      <property name="ipAddress">10.10.0.72</property>

                      <property name="schema">test</property>

 

                <!-- 用于登陆mysql的用户名 -->

                       <property name="user">test</property>

 

                 <!-- 用于登陆mysql的密码 -->

 

                        <property name="password">123456</property>

 

            </factoryConfig>

 

      <!-- ObjectPool实现类 -->

         <poolConfig class="com.meidusa.amoeba.net.poolable.PoolableObjectPool">

                <property name="maxActive">200</property>

                  <property name="maxIdle">200</property>

                  <property name="minIdle">10</property>

                  <property name="minEvictableIdleTimeMillis">600000

</property>

                   <property name="timeBetweenEvictionRunsMillis">600000</property>

                        <property name="testOnBorrow">true</property>

                         <property name="testWhileIdle">true</property>

                   </poolConfig>

        </dbServer>

 

本文出自 “Devops” 博客,请务必保留此出处http://wiliiwin.blog.51cto.com/928128/462903