从 mysql 表中清除数据

Question

我有一个 cron 设置来备份生产 mysql 表，并希望定期从表中清除数据。我必须删除 id 引用的多个表中的数据。

一些背景：我需要删除大约 200 万行，我的应用程序将持续读取/写入我的数据库（但它通常不应该访问被删除的行）

我的问题是我应该如何根据以下参数构建删除查询：

1. 在单个批量查询中删除与批量删除？
2. 在单个事务中跨不同表删除与不使用任何事务删除。如果我在事务中使用delete即使是批量删除也会有表级锁吗？
3. 我没有设置任何分区，碎片会成为问题吗？

Answer 1

假设：

1. 隔离级别：可重复读取——默认 Mysql 隔离级别。

2. 删除查询是基于范围而不是主索引。

3. 删除一个事务中的所有行， 会有很长的事务，以及更大的锁。这会增加复制滞后，复制滞后很糟糕，新的 DC 真的很糟糕。拥有更大的锁也会降低您的写入吞吐量。 （在隔离级别可序列化的情况下，甚至读取吞吐量也可能会受到影响。）

4. 批量删除。 比全部删除要好，但是随着范围的删除，每次删除的锁数会更多，（将采用间隙锁和下一行锁）。所以在范围内批量删除也会有同样的问题，只是更小。

与全部删除和批量删除相比，批量删除更可取。

其他方式：（我们需要在某个时间之前删除行） 1. 有一个守护进程，它运行每个配置时间和。 一世。从 purge-time

这种方法将确保较小的事务和只有行级锁。 （基于主键的删除只需要行级锁）。此外，您的查询很简单，因此即使部分删除成功，您也可以重新运行。而且我觉得拥有这些原子不是必需的。

或者

1. 降低你的隔离级别：到 READ_COMMITED 甚至，使用批量删除你应该没问题。在 Read COMMITED 隔离中，即使通过辅助键访问，锁也仅在行上。

或者

1. 如果您的模型允许基于时间分片并删除数据库本身:)