【发布时间】:2015-06-29 02:09:31
【问题描述】:
背景信息:我们经营一个电子商务网站,并试图找出处理“历史”数据的最佳方法,这些表使用非常频繁且绑定也包含大量记录(即. 订单、客户等)。
我特别关注 2 个具体场景:
- 数据库迁移
- 选择
数据库迁移
在数据库迁移的情况下,我们开始看到有时我们需要运行一些锁定整个表的 ALTER TABLE,如果表有这么多记录,这可能需要一段时间。当然,在迁移完成之前,表上的所有操作都会暂停,这意味着我们的结帐可能会因为我们将VARCHAR(15) 更改为VARCHAR(256) 而关闭。
从 MySQL 5.6 开始,很多操作都是在“INPLACE”完成的,这意味着(来自what I understood)他们不会创建一个全表锁:这没问题,但仍然不完美——如果我们需要更改列的类型(不能执行 INPLACE)并且我们真的不想在维护模式下保持几分钟?
我的超级贫民窟想法是简单地复制表(复制它),然后在复制的表上执行迁移,停止写入原始表(即锁定它),将未同步的数据复制到复制一个并交换它们。我认为percona tool for zero-downtime migrations 做了类似的事情,所以也许这是“最好”的方法?
意见?
选择
对于SELECTs,由于大多数旧数据很少被访问,我想到了range-partitioning它按日期(例如2015年之前/2015年之后),然后更改我们的大部分查询以获取内容WHERE YEAR(created_at) >= 2015.
如果用户想要他的完整历史数据,那么我们会动态删除该条件。这以某种方式确保数据是well-partitioned。
还有什么想法吗?您认为分区是否值得?
【问题讨论】:
标签: mysql database database-migration partitioning downtime