千万级数据量表如何快速添加索引/字段

添加字段语句

ALTER TABLE id_t ADD title(255) DEFAULT '' COMMENT '标题' AFTER id;

问题

线上的一张表如果数据量很大千万级,执行加字段加索隐操作就会锁表,这个过程可能需要很长时间甚至导致服务崩溃,那么这样操作就很有风险了。

解决一

1. 创建一个临时的新表,首先复制旧表的结构(包含索引) 

2. 给新表加上新增的字段

3. 把旧表的数据复制过来

4. 删除旧表,重命名新表的名字为旧表的名字

不过这里需要注意,执行第三步的时候,可能这个过程也需要时间,这个时候有新的数据进来,所以原来的表如果有字段记录了数据的写入时间就最好了,可以找到执行这一步操作之后的数据,并重复导入到新表,直到数据差异很小。不过还是会可能损失极少量的数据。

所以,如果表的数据特别大,同时又要保证数据完整,最好停机操作。

解决二

一般千万级数据表的项目会是集群部署及主从架构,可以在备库中添加字段然后主从切换

解决三

把表进行同步拆分,重新常见索引及表把数据同步过去可以写接口也可以用脚本

其他

使用第三方在线改字段的工具

 

 

以上是针对大表增加字段或索引时候的解决方案仅供参考

 

posted @ 2023-03-31 11:32  白玉神驹  阅读(1797)  评论(0)    收藏  举报