产品动态 两地数据实时同步解决方案

两地数据实时同步解决方案

两地数据实时同步怎么实现的呢?下面滴普科技来跟大家详细的聊一聊,希望能够帮助到大家!
搜狗截图21年08月27日0004_4.jpg

两地数据实时同步解决方案

1.需求描述

近期一个项目需要实现两个数据库间的数据双向实时同步。

2.解决思路

打算采用双主的架构实现这个需求,但是通常双主架构是为了备份,不是为了多点写入,所以实际项目中多个系统只访问双主中 的一个数据库,另一个作为实时备份,在一个服务器故障时可以立刻切换到另一个服务器,业务数据访问不受影响。

3.解决方案

MYSQL主从同步是目前使用比较广泛的数据库架构,技术比较成熟,配置也不复杂,特别是对于负载比较大的网站,主从同步能够有效缓解数据库读写的压力。

MySQL主从同步的机制

MYSQL主从同步是在MySQL主从复制(Master-Slave Replication)基础上实现的,通过设置在Master MySQL上的binlog(使其处于打开状态),Slave MySQL上通过一个I/O线程从Master MySQL上读取binlog,然后传输到Slave MySQL的中继日志中,然后Slave MySQL的SQL线程从中继日志中读取中继日志,然后应用到Slave MySQL的数据库中。这样实现了主从数据同步功能。

MySQL主从同步的作用

1、可以作为一种备份机制,相当于热备份

2、可以用来做读写分离,均衡数据库负载

MySQL主从同步的步骤

一、准备操作

1、主从数据库版本一致,建议版本5.5以上

2、主从数据库数据一致

二、主数据库master修改

1、修改MySQL配置:

# 日志文件名

log-bin = mysql-bin

# 主数据库端ID号

server-id = 1

# 不同步哪些数据库

binlog-ignore-db = mysql

binlog-ignore-db = performance_schema

binlog-ignore-db = information_schema

# 只同步哪些数据库,除此之外,其他不同步

binlog-do-db = quality-control

# 允许复制主服务的库的哪一张表

replicate-do-table=quality-control.t_todo

# 日志保留时间

expire_logs_days = 10

# 控制binlog的写入频率。每执行多少次事务写入一次

# 这个参数性能消耗很大,但可减小MySQL崩溃造成的损失

sync_binlog = 3

# 日志格式,建议mixed

# statement 保存SQL语句

# row 保存影响记录数据

# mixed 前面两种的结合

binlog_format = mixed

2、重启mysql,创建用于同步的账户:

# 创建slave帐号slave_account,密码123456

mysql>grant replication slave on . to ‘slave_account’@’%’ identified by ‘123456’;

如果账户仅用于复制,那么replication slave的权限就够了,但在本地查看从库(slave server)信息,还需要replication client权限。

# 更新数据库权限

mysql>flush privileges;

3、查询master的状态

mysql> show master status;

±-----------------±---------±-------------±-----------------+

| File | Position | Binlog_Do_DB | Binlog_Ignore_DB |

±-----------------±---------±-------------±-----------------+

| mysql-bin.000009 | 196 | | |

±-----------------±---------±-------------±-----------------+

1 row in set

注:执行完这个步骤后不要再操作主数据库了,防止主数据库状态值变化

三、从数据库slave修改

1、修改MySQL配置:

log_bin =mysql-bin

#relay_log=/path_to_mysql_log/mysql-relay-bin

log_slave_updates=1

read_only=1

binlog-do-db = quality-control

# 允许复制主服务的库的哪一张表

replicate-do-table=quality-control.t_todo

# 从数据库端ID号

server-id =2

2、重启mysql执行同步命令

# 执行同步命令,设置主数据库ip,同步帐号密码,同步位置

mysql>change master to master_host=‘172.16.17.8’,master_user=‘slave_account’,master_password=‘123456’,master_log_file=‘mysql-bin.000009’,master_log_pos=196;

# 开启同步功能

mysql>start slave;

3、检查从数据库状态:

mysql>

*************************** 1. row ***************************

Slave_IO_State: Waiting for master to send event

Master_Host: 172.16.17.8

Master_User: slave_account

Master_Port: 3306

Connect_Retry: 60

Master_Log_File: mysql-bin.000009

Read_Master_Log_Pos: 196

Relay_Log_File: vicky-relay-bin.000002

Relay_Log_Pos: 253

Relay_Master_Log_File: mysql-bin.000009

Slave_IO_Running: Yes

Slave_SQL_Running: Yes

Replicate_Do_DB:

Replicate_Ignore_DB:

注:Slave_IO_Running及Slave_SQL_Running进程必须正常运行,即YES状态,否则说明同步失败。

到这里,主从数据库设置工作已经完成,自己可以新建数据库和表,插入和修改数据,测试一下是否成功

四、反向配置

反向配置参考上述步骤,只有server_id不同

五、其他可能用到的相关参数

slave端:

# 停止主从同步

mysql> stop slave;

# 连接断开时,重新连接超时时间

mysql> change master to master_connect_retry=50;

# 开启主从同步

mysql> start slave;

以上连接超时设置,类似方式可用于设置主数据库ip,同步帐号密码,同步位置。

以上就是关于“两地数据实时同步解决方案”的相关介绍,更多关于数据集成的知识请继续关注我们滴普科技,欢迎咨询合作!

订阅
及时获得DEEPEXI的最新资讯
订阅
马上开启数字化升级之旅
立即免费试用,或直接与我们的解决方案专家沟通,了解和评估 DEEPEXI 如何帮助您的团队更进一步。
联系我们
专人在线为您服务
联系我们
专属顾问免费为您提供专业服务
建议反馈
您的建议,让我们更进一步
客服微信

客服微信

售前咨询电话

400 8279 010