巧用管道实现MySQL不落盘数据迁移

您所在的位置:网站首页 mysqldump导入数据锁表吗 巧用管道实现MySQL不落盘数据迁移

巧用管道实现MySQL不落盘数据迁移

2023-07-03 15:02| 来源: 网络整理| 查看: 265

需要迁移一个几百G的大数据库,原计划将数据导出成文件再导入,但服务器上磁盘空间不足,如下脚本可以不落盘直接迁移数据:

nohup sh -c "mysqldump -h172.26.0.1 --port=33061 -uroot --password='xx' --set-gtid-purged=OFF --lock-tables=false db_name tables_name | mysql -h172.26.18.222 -P3307 --ssl-mode=DISABLED -uroot --password='Cninfo#3307' db_name" 2>&1 &

命令有点长,解释一下: mysqldump连接源数据库,会将SQL打印到标准输出,管道将其传送到mysql命令,作为其标准输入,mysql从标准输入取SQL执行。--set-gtid-purged=OFF:让目标MySQL在导入时生成binlog。--ssl-mode=DISABLED:禁用SSL,因为我是从8.0导入到5.7,如果不加这个会报错,因为源和目标服务器的SSL版本不一致,干脆禁用掉它。整个命令被包裹了两层,第一层是sh -c "xxx",第二层是nohup xxx 2>&1 &,目的是让脚本保持后台执行,不会随着命令容口的关闭而退出。只用sh -c这一层的话,如果中途报错看不到报错信息,所以使用nohup来接收一下输出信息,在nohup.out中。 效率分析:

因为没有实际写磁盘,数据只是通过管道在两个命令间传递,而管道数据是缓存在内存中的,所以效率很高。如果源和目标数据库在一台机器上,而内存又足够大的话,整个过程甚至都可以在内存中,效率会更高。



【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3