需求:
因为原来的旧数据库A老旧,需要裁撤。目前计划搭建一个新的库B,首先让新库B成为旧库A的从库,之后反转,裁撤掉旧库A,让新库B成为主库。
问题:
A库是另外一个库的从库,并且A库中混合着innodb和myisam引擎库表。目前新库B打算同步A库中一部分库表,另外的库表放弃。B库主要从事离线数据统计。
准备阶段:
a.下载mysql库,配置好新库B。
b. 备份/etc/my.cnf.3306文件为 /etc/my.cnf.3306.bak
c. 修改 /etc/my.cnf.3306 配置文件里的参数
1. server_id 是mysql的身份ID(主从配置用到辨别mysql身份的), 修改 server_id 为一个和IP相关随机数。
2. log_slave_updates=1;决定是否本slave库是否要将更新写入bin-log,如果slave可能成为主库需要设置。
3. innodb_flush_log_at_trx_commit=2;事务等操作是否实时同步到bin-log(容灾和性能)
4. sync_binlog =1;二进制日志同步到磁盘的频率(数据容灾)
启动新库B:
cd /usr/local/mysql/bin/;
mysqld_safe --defaults-file=/etc/my.cnf.3306 --user=mysql &
锁住主库:
flush tables with read lock;
主库拉取快照:
方案1、
方法:逻辑备份,将表锁住,然后使用tar命令拷贝。
问题:要拷贝的数据太多,文件太大。tar命令拷贝之后,出现文件大小不一致,解压失败的情况。经过尝试,最终放弃,问题太多了。tar命令打包,新机器解包失败,scp拷贝文件,出现文件大小不一致。
方案2、
方法:使用mysqldump命令导出数据。
一次导出,mysqldump --master-data=1 --opt --databases demo_stat > data.demo.sql。结果数据量太大,磁盘空间不足了!
方案3、
方法:使用mysqldump命令导出数据。分批导出,分批入到新库中。
这是最终方案。
从库导入快照:
mysql -uroot < databases.sql
并查看databases.sql中的 CHANGE MASTER语句,确定binlog文件名和pos
在主库上为从库创建用户:
grant replication slave, replication client on *.* to replication@'b.b.b.b' identified by '123456';
在从库上设置主库:
mysql > change master to master_host='a.a.a.a', master_user='replication', master_password='123456', master_port=3306, master_log_file='mysqlslave-log.013445', master_log_pos=185073000, master_connect_retry=10;
mysql > slave start;
解锁主库:
关闭shell。
后期观察:
挑一个库表,查看备份数据是否完整。
可能遇到问题:
1、Last_IO_Error: error connecting to master 'replication
Slave_IO_Running: Connecting
原因:用户密码错误。
2、数据量过大,迁移时间太久,机器太旧。采用逻辑备份的时候,由于tar命令版本不一致,旧机器用的是tar 1.15.1,新机器用的是 tar 1.26,打出来的包有可能解不了。
3、Last_Error: Error 'Duplicate entry '567828' for key 'PRIMARY'' on query. Default database:...
原因:是某个库没有更新,继续锁表,拷贝到新的机器上。
结束!