组合sql查询耗时太长

Question

我在 MySQL 中的一个查询在执行时花费了太多时间。在这个查询中，我使用 IN 运算符从 MySQL 数据库中获取数据库。

我的查询：

SELECT *
FROM databse_posts.post_feeds
WHERE
    post_id IN (SELECT post_id FROM database_users.user_bookmarks where user_id=3) AND
    post_date < unix_timestamp();

在这种情况下，两个单独的查询执行所需的时间都非常少，例如

SELECT post_id FROM database_users.user_bookmarks where user_id=3

最多需要大约 400 毫秒

和

SELECT * FROM databse_posts.post_feeds Where post_date < unix_timestamp();

最多需要 300 毫秒

但是使用 IN 运算符将两个查询组合在一起大约需要 6 到 7 秒。 为什么这需要太多时间。 我还编写了不同类型的查询，但所有这些都不会花费那么多时间。

Answer 1

您可以尝试在子选择上进行内部连接，而不是 where IN（子选择）

SELECT *
FROM databse_posts.post_feeds
INNER JOIN (
    SELECT post_id 
    FROM database_users.user_bookmarks 
    where user_id=3
) T on T.post_id = post_feeds.post_id
AND
post_date < unix_timestamp();

并确保您在 post_feeds.post_id 和 user_bookmarks.user_id, user_bookmarks.post_id 上有正确的索引

Answer 2

我的做法：

您需要为字段post_feeds.post_id、user_bookmarks.post_id、user_bookmarks.user_id和post_feeds.post_date字段创建索引，然后使用INNER JOIN让MySQL 引擎以有效的方式操作行的过滤和合并：

SELECT
    pf.*
FROM
    databse_posts.post_feeds pf
    INNER JOIN database_users.user_bookmarks ub
        ON ( pf.post_id = ub.post_id )
WHERE
    ub.user_id = 3
    AND pf.post_date < unix_timestamp();

Answer 3

我在这里粗略的猜测是WHERE IN 表达式正在做一些你可能不知道的事情。考虑您的完整查询：

SELECT *
FROM databse_posts.post_feeds
WHERE
    post_id IN (SELECT post_id FROM database_users.user_bookmarks where user_id=3) AND
    post_date < unix_timestamp();

对于每条记录，MySQL 必须检查post_id 的每个值，并将其与来自子查询的post_id 列表进行比较。这比只运行该子查询一次要昂贵得多。 MySQL 可以使用各种技巧来加快速度，但 WHERE IN 子句中的子查询与只运行该子查询一次不同。

如果这个假设是正确的，那么下面的查询也应该在 6-7 秒的范围内：

SELECT *
FROM databse_posts.post_feeds
WHERE
    post_id IN (SELECT post_id FROM database_users.user_bookmarks where user_id=3)

如果是这样，那么我们就会知道性能下降的原因。