MySQL主从复制(Master-Slave)与读写分离(MySQL-Proxy)实践
Mysql作为目前世界上使用最广泛的免费数据库,相信所有从事系统运维的工程师都一定接触过。但在实际的生产环境中,由单台Mysql作为独立的数据库是完全不能满足实际需求的,无论是在安全性,高可用性以及高并发等各个方面。
因此,一般来说都是通过 主从复制(Master-Slave)的方式来同步数据,再通过读写分离(MySQL-Proxy)来提升数据库的并发负载能力 这样的方案来进行部署与实施的。
如下图所示:
一、MySQL的安装与配置
具体的安装过程,建议参考我的这一篇文章:http://www.cnblogs.com/0356dujinshuai/p/7738316.html二、MySQL主从复制
场景描述: 主数据库服务器:192.168.66.106,MySQL已经安装,并且无应用数据。 从数据库服务器:192.168.66.107,MySQL已经安装,并且无应用数据。2.1 主服务器上进行的操作
启动mysql服务/etc/init.d/mysql start通过命令行登录管理MySQL服务器
/usr/local/mysql/bin/mysql -uroot -p'new-password'授权给从数据库服务器192.168.66.107
mysql> GRANT REPLICATION SLAVE ON *.* to 'rep1'@'192.168.66.107' identified by ‘123456’;查询主数据库状态
Mysql> show master status; +------------------+----------+--------------+------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | +------------------+----------+--------------+------------------+ | mysql-bin.000003 | 400 | | | +------------------+----------+--------------+------------------+记录下 FILE 及 Position 的值,在后面进行从服务器操作的时候需要用到。
2.2 配置从服务器
修改从服务器的配置文件/usr/local/mysql/etc/my.cnf 将 server-id = 1修改为 server-id = 8,并确保这个ID没有被别的MySQL服务所使用。启动mysql服务
/etc/init.d/mysql start通过命令行登录管理MySQL服务器
/usr/local/mysql/bin/mysql -uroot -p'new-password'执行同步SQL语句
mysql> change master to master_host=’192.168.66.106’, master_user=’rep1’, master_password=’123456’, master_log_file=’mysql-bin.000003’, master_log_pos=400;正确执行后启动Slave同步进程
mysql> start slave;主从同步检查
mysql> show slave status\G ============================================== **************** 1. row ******************* Slave_IO_State: Master_Host: 192.168.66.106 Master_User: rep1 Master_Port: 3306 Connect_Retry: 60 Master_Log_File: mysql-bin.000003 Read_Master_Log_Pos: 800 Relay_Log_File: localhost-relay-bin.000006 Relay_Log_Pos: 400 Relay_Master_Log_File: mysql-bin.000004 Slave_IO_Running: YES Slave_SQL_Running: YES Replicate_Do_DB: ……………省略若干…………… Master_Server_Id: 1 1 row in set (0.01 sec) ==============================================其中Slave_IO_Running 与 Slave_SQL_Running 的值都必须为YES,才表明状态正常。
2.3 验证主从复制效果
主服务器上的操作
在主服务器上创建数据库first_db mysql> create database first_db; Query Ok, 1 row affected (0.01 sec)在主服务器上创建表first_tb
mysql> create table first_tb(id int(3),name char(10)); Query Ok, 1 row affected (0.00 sec)在主服务器上的表first_tb中插入记录
mysql> insert into first_tb values (001,’myself’); Query Ok, 1 row affected (0.00 sec)在从服务器上查看
mysql> show databases; ============================= +--------------------+ | Database | +--------------------+ | information_schema | | first_db | | mysql | | performance_schema | | test | +--------------------+ 5 rows in set (0.01 sec) ============================= 数据库first_db已经自动生成mysql> use first_db
Database chagedmysql> show tables;
============================= +--------------------+ | Tables_in_first_db | +--------------------+ | first_tb | +--------------------+ 1 row in set (0.02 sec) ============================= 数据库表first_tb也已经自动创建mysql> select * from first_tb;
============================= +------+------+ | id | name | +------+------+ | 1 | myself | +------+------+ 1 rows in set (0.00 sec) ============================= 记录也已经存在由此,整个MySQL主从复制的过程就完成了,接下来,我们进行MySQL读写分离的安装与配置。
三、MySQL读写分离
场景描述: 数据库Master主服务器:192.168.66.106 数据库Slave从服务器:192.168.66.107 MySQL-Proxy调度服务器:192.168.66.108以下操作,均是在192.168.66.108即MySQL-Proxy调度服务器 上进行的。
3.1 MySQL的安装与配置
具体的安装过程与上文相同。3.2 检查系统所需软件包
通过 rpm -qa | grep name 的方式验证以下软件包是否已全部安装。 gcc* cmake gcc-c++* autoconf* automake* zlib* libxml* ncurses-devel* libmcrypt* libtool* flex* pkgconfig* libevent* glib*若缺少相关的软件包,可通过yum -y install方式在线安装,或直接从系统安装光盘中找到并通过rpm -ivh方式安装。
3.3 编译安装lua
MySQL-Proxy的读写分离主要是通过rw-splitting.lua脚本实现的,因此需要安装lua。这里我们建议采用源码包进行安装
cd /usr/src wget http://www.lua.org/ftp/lua-5.1.4.tar.gz tar zvfx lua-5.1.4.tar.gz cd lua-5.1.4make linux
make install
cp etc/lua.pc /usr/lib/pkgconfig/
export PKG_CONFIG_PATH=$PKG_CONFIG_PATH:/usr/lib/pkgconfig3.4 安装配置MySQL-Proxy
wget https://downloads.mysql.com/archives/get/file/mysql-proxy-0.8.5-linux-el6-x86-64bit.tar.gztar zxvf mysql-proxy-0.8.5-linux-el6-x86-64bit.tar.gz
mv mysql-proxy-0.8.5-linux-el6-x86-64bit /usr/local/mysql-proxy修改读写分离配置文件:
vim /usr/local/mysql-proxy/lua/rw-splitting.luaif not proxy.global.config.rwsplit then proxy.global.config.rwsplit = { min_idle_connections = 1, #默认超过4个连接数时,才开始读写分离,改为1 max_idle_connections = 1, #默认8,改为1 is_debug = false }end
启动mysql-proxy:
./bin/mysql-proxy \
--proxy-backend-addresses=192.168.66.106:3306 \
--proxy-read-only-backend-addresses=192.168.66.107:3306 \
--proxy-lua-script=/usr/local/mysql-proxy/share/doc/mysql-proxy/rw-splitting.lua \
--daemon;
连接mysql-proxy:
注意proxy的端口是4040
mysql -h “192.168.66.108” -P 4040 -u username -p password至此,mysql读写分离完成 !