一、什么是MySQL高可用架构
咱们先搞懂最基础的概念:MySQL高可用架构,说白了就是不让MySQL数据库“罢工”。比如你用的外卖APP、银行转账系统,要是数据库突然崩了,用户就没法点单、转不了账,这肯定不行。高可用架构的核心目标,就是让数据库全年99.99%以上的时间都能正常干活,就算某台机器出问题,也能快速切换到备用机器继续跑。
举个最常见的场景:假设你做的是一个电商网站,用单台MySQL存订单数据。如果这台机器硬盘坏了、网卡断了,或者突然断电,那网站就会出现“下单失败”“查不到订单”的问题,严重的话还会丢数据。高可用架构就是为了避免这种情况。
二、常见高可用架构的选型对比
2.1 主从复制架构
主从复制是最基础的高可用架构,原理很简单:有一台“主库”负责写数据,同时实时把新数据同步到一台或多台“从库”。从库平时可以用来读数据(比如查订单),要是主库坏了,就把其中一台从库改成主库继续写。
2.1.1 技术栈:MySQL 8.0 + 主从复制
示例配置(主库配置):
# 主库配置文件 my.cnf
server-id = 1 # 主库的唯一标识,不能和从库重复
log-bin = mysql-bin # 开启二进制日志,用来同步数据
binlog-format = ROW # 日志格式,推荐用ROW,避免数据不一致
binlog-do-db = test_db # 只同步test_db库的数据,按需配置
示例配置(从库配置):
# 从库配置文件 my.cnf
server-id = 2 # 从库的唯一标识,不能和主库、其他从库重复
relay-log = relay-log # 开启中继日志,用来接收主库的二进制日志
read-only = ON # 从库设置为只读,避免误写
主从同步启动命令:
# 先在主库创建同步账号,只给从库用
mysql -u root -p -e "CREATE USER 'repl'@'%' IDENTIFIED BY 'Repl123!'; GRANT REPLICATION SLAVE ON *.* TO 'repl'@'%'; FLUSH PRIVILEGES;"
# 查看主库的日志位置,记录File和Position的值
mysql -u root -p -e "SHOW MASTER STATUS;"
# 假设输出的File是mysql-bin.000001,Position是154
# 在从库配置同步参数
mysql -u root -p -e "CHANGE MASTER TO MASTER_HOST='主库IP', MASTER_USER='repl', MASTER_PASSWORD='Repl123!', MASTER_LOG_FILE='mysql-bin.000001', MASTER_LOG_POS=154; START SLAVE;"
# 检查从库同步状态,确保Slave_IO_Running和Slave_SQL_Running都是Yes
mysql -u root -p -e "SHOW SLAVE STATUS\G"
2.1.2 优缺点与注意事项
优点:配置简单,成本低,适合中小项目。 缺点:主从切换需要人工操作,切换期间可能会有短暂的服务中断;如果主库的二进制日志出问题,从库同步会断;没有自动故障转移能力。 注意事项:主从的server-id必须唯一;主从的MySQL版本要兼容;主从的时区、字符集要一致。
2.2 MGR(MySQL Group Replication)架构
MGR是MySQL官方推出的高可用架构,比主从复制更智能。它是一个由多个MySQL节点组成的“组”,组里的节点可以自动同步数据,自动选主,自动故障转移。
2.2.1 技术栈:MySQL 8.0 + MGR
示例配置(所有节点通用配置):
# 所有节点的my.cnf配置
server-id = 1 # 每个节点唯一,依次设为1、2、3
gtid_mode = ON # 开启GTID,方便数据同步和故障排查
enforce_gtid_consistency = ON # 强制GTID一致性
transaction_write_set_extraction = XXHASH64 # 事务写入集提取方式
loose-group_replication_group_name = "aaaaaaaa-aaaa-aaaa-aaaa-aaaaaaaaaaaa" # 组的唯一ID,用uuidgen生成
loose-group_replication_start_on_boot = OFF # 开机不自动启动MGR
loose-group_replication_local_address = "节点IP:33061" # 节点自己的通信地址
loose-group_replication_group_seeds = "节点1IP:33061,节点2IP:33061,节点3IP:33061" # 组内所有节点的通信地址
loose-group_replication_single_primary_mode = ON # 单主模式,只有一个节点能写,其他节点只读
MGR组启动命令(先在第一个节点执行):
# 配置MGR需要的账号
mysql -u root -p -e "SET SQL_LOG_BIN=0; CREATE USER 'rpl_user'@'%' IDENTIFIED BY 'Rpl123!'; GRANT REPLICATION SLAVE ON *.* TO 'rpl_user'@'%'; FLUSH PRIVILEGES; SET SQL_LOG_BIN=1;"
# 安装MGR插件
mysql -u root -p -e "INSTALL PLUGIN group_replication SONAME 'group_replication.so';"
# 启动MGR,第一个节点用bootstrap参数
mysql -u root -p -e "SET GLOBAL group_replication_bootstrap_group=ON; START GROUP_REPLICATION; SET GLOBAL group_replication_bootstrap_group=OFF;"
# 检查第一个节点的状态
mysql -u root -p -e "SELECT * FROM performance_schema.replication_group_members;"
其他节点加入MGR组的命令:
# 同样安装MGR插件
mysql -u root -p -e "INSTALL PLUGIN group_replication SONAME 'group_replication.so';"
# 启动MGR
mysql -u root -p -e "START GROUP_REPLICATION;"
# 检查组状态,确保所有节点都显示ONLINE
mysql -u root -p -e "SELECT * FROM performance_schema.replication_group_members;"
2.2.2 优缺点与注意事项
优点:官方原生支持,自动选主、自动故障转移,数据一致性有保证,适合中大型项目。 缺点:配置比主从复制复杂,对网络要求高(节点之间通信延迟不能太高),至少需要3个节点才能保证高可用。 注意事项:MGR要求所有节点的MySQL版本一致;网络必须稳定,否则会导致节点被踢出组;单主模式下只有一个节点能写,多主模式适合特定场景,容易出数据冲突。
2.3 中间件架构(比如ProxySQL + MGR)
单纯的MGR虽然能自动选主,但应用程序还是不知道新的主库在哪里。比如MGR原来的主库坏了,新选出来的主库IP和端口没变的话还好,要是变了,应用程序的配置就得改。中间件架构就是为了解决这个问题:中间件负责管理MGR组,应用程序只需要连中间件,中间件自动把写请求转发给主库,读请求转发给从库,主库变了中间件自动更新。
2.3.1 技术栈:ProxySQL 2.5 + MySQL 8.0 MGR
示例ProxySQL配置:
# 连接ProxySQL的管理端口
mysql -u admin -padmin -h 127.0.0.1 -P 6032
# 配置MGR组的节点信息
INSERT INTO mysql_servers (hostgroup_id, hostname, port) VALUES (1, '节点1IP', 3306), (2, '节点2IP', 3306), (3, '节点3IP', 3306);
# 配置MGR的监控账号,ProxySQL用来检查节点状态
UPDATE global_variables SET variable_value='rpl_user' WHERE variable_name='mysql-monitor_username';
UPDATE global_variables SET variable_value='Rpl123!' WHERE variable_name='mysql-monitor_password';
# 配置路由规则:写请求(比如INSERT、UPDATE)转发到主库所在的hostgroup,读请求转发到从库
INSERT INTO mysql_query_rules (rule_id, active, match_digest, destination_hostgroup, apply) VALUES (1, 1, '^SELECT', 2, 1), (2, 1, '^INSERT|UPDATE|DELETE', 1, 1);
# 加载配置到运行时
LOAD MYSQL SERVERS TO RUNTIME;
LOAD MYSQL QUERY RULES TO RUNTIME;
# 保存配置到磁盘,避免重启丢失
SAVE MYSQL SERVERS TO DISK;
SAVE MYSQL QUERY RULES TO DISK;
2.3.2 优缺点与注意事项
优点:对应用程序透明,不用关心底层主从切换,读写分离,能灵活配置路由规则。 缺点:多了一层中间件,增加了架构复杂度,需要维护中间件的高可用(比如用Keepalived给ProxySQL做虚拟IP)。 注意事项:中间件的配置要和MGR的状态同步,否则会导致请求转发错误;中间件本身要做高可用,否则中间件坏了整个数据库集群就不能用了。
三、选型与落地要点
3.1 选型要点
选型的时候要结合自己的项目情况,别盲目选复杂的架构:
- 如果是个人项目、小项目,访问量不大,选主从复制架构就够了,成本低,配置简单。
- 如果是中大型项目,对数据一致性、可用性要求高,选MGR架构,最好搭配ProxySQL做中间件。
- 如果是超大型项目,访问量特别大,可能需要分库分表+高可用架构,比如ShardingSphere + MGR。
举个例子:你做的是一个校园论坛,访问量不大,用主从复制架构,主库负责写帖子,从库负责读帖子,就算主库坏了,人工切换到从库,切换时间最多几分钟,对用户影响不大。但如果你做的是一个在线支付系统,主从切换的几分钟可能会导致用户支付失败,甚至丢数据,这时候就必须选MGR架构,自动切换,切换时间最多几十毫秒,用户几乎感知不到。
3.2 落地要点
3.2.1 网络规划
不管选哪种架构,网络都很重要。主从复制、MGR都需要节点之间频繁通信,所以节点之间的网络延迟要低,带宽要够。比如MGR的节点之间如果延迟超过1秒,就可能导致节点被踢出组,影响集群可用性。
落地的时候,最好把所有数据库节点放在同一个机房的同一个网段,避免跨机房通信延迟太高。如果必须跨机房,要选专线连接,保证网络稳定。
3.2.2 数据备份
高可用架构不是万能的,不能替代数据备份。比如有人误删了主库的表,主从复制会把这个操作同步到从库,MGR也会同步到所有节点,这时候高可用架构就没用了,只能靠备份恢复。
所以落地的时候,一定要做定时备份,比如每天凌晨备份一次全量数据,每小时备份一次增量数据。备份文件要存在异地,避免机房出问题备份文件也丢了。
3.2.3 监控告警
落地的时候要做完善的监控,比如监控主从复制的延迟、MGR组的节点状态、数据库的CPU、内存、磁盘、网络等指标。一旦出现问题,要及时告警,比如主从复制延迟超过10秒,就告警;MGR有节点离线,就告警。
常用的监控工具:Prometheus + Grafana,配合MySQL的监控插件,能直观看到数据库的运行状态。
3.2.4 测试演练
落地之后要定期做故障演练,比如故意关掉主库,看能不能自动切换,切换时间是多少,会不会丢数据。只有经过测试,才能保证高可用架构真的能用。
比如MGR架构,你可以先关掉主库,看其他节点能不能自动选主,应用程序能不能正常访问数据库。如果测试的时候发现切换失败,就要及时排查问题,比如是不是网络不通,是不是配置不对。
四、应用场景分析
- 主从复制架构适合:个人项目、小公司内部系统、访问量不大的网站。
- MGR架构适合:中大型电商、在线支付、金融系统、对数据一致性和可用性要求高的业务。
- ProxySQL + MGR架构适合:有大量读请求、需要读写分离、对应用程序透明的业务。
五、文章总结
MySQL高可用架构的选型,核心是“适合自己”,不要盲目追求复杂。小项目用主从复制就够了,中大型项目用MGR加中间件。落地的时候要注意网络、备份、监控、测试,保证架构真的能发挥作用。
评论
围绕“MySQL高可用架构设计的选型与落地要点”参与讨论