RDS MySQL 8.0支持X-Engine引擎,X-Engine可以提供更好的数据压缩能力,降低磁盘空间成本。本文介绍如何将InnoDB/TokuDB/Myrocks引擎转换为X-Engine引擎。
背景信息
X-Engine是阿里云自研的联机事务处理OLTP(On-Line Transaction Processing)数据库存储引擎。作为自研数据库PolarDB的存储引擎之一,X-Engine已经广泛应用在阿里集团内部诸多业务系统中,包括交易历史库、钉钉历史库等,大幅缩减了业务成本;同时也作为双十一大促的关键数据库技术,挺过了数百倍平时流量的冲击。
更多详情请参见:
本文旨在指导您如何将存量InnoDB/TokuDB/Myrocks引擎转换为X-Engine引擎。如果是一个新业务,建议您在购买RDS MySQL 8.0实例时直接指定默认存储引擎为X-Engine,或建表语句指定engine=xengine。更多信息,请参见 X-Engine引擎使用须知 。
注意事项
-
如果原表为InnoDB引擎,转换前请确保实例的剩余磁盘空间是现有数据量的2倍。转换为X-Engine引擎后空间占用会减小至原数据大小的10%~50%。
-
使用方案一进行转换时,需要更新配置参数并重启实例,请在停止业务之后进行操作。
-
使用方案二进行全库迁移时,由于需要切换连接地址,请在业务低峰期进行操作。
-
在转换线上业务引擎之前,请提前进行SQL兼容性测试,确认正常后再转换线上业务引擎。
-
转换引擎后请修改实例参数 default_storage_engine 为 xengine ,这样后续创建的表的引擎即为X-Engine。
方案建议
方案一
此方案为修改参数模板启用X-Engine引擎,然后使用DDL语句转换引擎,最简单直接。在启用X-Engine引擎时,会重启实例,后续的转换引擎操作会短暂阻塞写入操作,不影响查询操作。
此操作会重启实例,重启后会将95%的内存资源分配给X-Engine引擎使用,请不要混用InnoDB引擎。
- 访问 RDS实例列表 ,在上方选择地域,然后单击目标实例ID。
-
在左侧导航栏中单击 参数设置 。
-
在左上角单击 应用模板 ,选择 MySQL_8.0_高可用系列_默认参数模板 | 系统默认 | X-Engine ,然后单击 确定 。
-
在 SQLConsole 执行如下命令进行转换:
alter table <数据库名>.<表名> engine xengine;
示例
alter table test.sbtest1 engine xengine;
方案二
此方案为使用阿里云的数据传输服务DTS(Data Transmission Service)实时同步原表数据到新实例,然后将业务切换到新实例。
通过DTS迁移数据时默认会继承源实例的引擎类型。所以需要先单独导出建表语句的SQL,修改Create语句中的引擎类型为X-Engine引擎. 然后再迁移数据到新建的X-Engine表中。
-
通过DMS登录原实例 ,导出原实例的所有表结构脚本。详细操作步骤请参见 数据库导出 。
-
解压缩后修改表结构脚本,将InnoDB或TokuDB修改为xengine。下图以InnoDB修改为xengine为例进行说明,TokuDB修改方法相同。
-
新购一个与原实例规格相同的RDS MySQL 8.0实例(购买时选择X-Engine参数模板)。
说明在 快速创建RDS MySQL实例 时,可以选择应用默认的X-Engine参数模板来设置X-Engine为默认存储引擎。
-
通过DMS登录新实例 ,将表结构脚本导入新实例。详细操作步骤请参见 数据导入 。
-
参考 MySQL实例间的双向同步 将原实例的数据同步至新实例。
重要在同步初始化时,请勿选择 结构初始化 。
执行结果
同步完成后,您可以确认数据是否同步成功,并进行SQL兼容性测试,测试正常再转换线上业务引擎。