如何在实体框架中使用条件进行快速 GroupBy 查询答案

【问题标题】：How to make fast GroupBy Query with Condition in Entity Framework如何在实体框架中使用条件进行快速 GroupBy 查询
【发布时间】：2016-12-05 15:01:56
【问题描述】：

我在 Entity Framework 中遇到了 GROUP BY 和 WHERE 的严重性能问题。

这是Northwind Database 的示例查询：

from order in Orders
join detail in OrderDetails on order.OrderID equals detail.OrderID
group detail by order.OrderDate into dateGroup
select new
{
    dateGroup.Key,
    Foo = dateGroup.Where(e => e.ProductID > 20).Sum(e => (decimal?)e.UnitPrice) ?? 0,
    Bar = dateGroup.Where(e => e.ProductID > 40).Sum(e => (decimal?)e.UnitPrice) ?? 0,
    Baz = dateGroup.Where(e => e.ProductID > 60).Sum(e => (decimal?)e.UnitPrice) ?? 0
}

这会生成以下 sql：

-- Region Parameters
DECLARE @p0 Int = 20
DECLARE @p1 Decimal(5,4) = 0
DECLARE @p2 Int = 40
DECLARE @p3 Decimal(5,4) = 0
DECLARE @p4 Int = 60
DECLARE @p5 Decimal(5,4) = 0
-- EndRegion
SELECT [t2].[OrderDate] AS [Key], COALESCE((
    SELECT SUM([t5].[value])
    FROM (
        SELECT [t4].[UnitPrice] AS [value], [t4].[ProductID], [t3].[OrderDate]
        FROM [Orders] AS [t3]
        INNER JOIN [Order Details] AS [t4] ON [t3].[OrderID] = [t4].[OrderID]
        ) AS [t5]
    WHERE ([t5].[ProductID] > @p0) AND ((([t2].[OrderDate] IS NULL) AND ([t5].[OrderDate] IS NULL)) OR (([t2].[OrderDate] IS NOT NULL) AND ([t5].[OrderDate] IS NOT NULL) AND ([t2].[OrderDate] = [t5].[OrderDate])))
    ),@p1) AS [Foo], COALESCE((
    SELECT SUM([t8].[value])
    FROM (
        SELECT [t7].[UnitPrice] AS [value], [t7].[ProductID], [t6].[OrderDate]
        FROM [Orders] AS [t6]
        INNER JOIN [Order Details] AS [t7] ON [t6].[OrderID] = [t7].[OrderID]
        ) AS [t8]
    WHERE ([t8].[ProductID] > @p2) AND ((([t2].[OrderDate] IS NULL) AND ([t8].[OrderDate] IS NULL)) OR (([t2].[OrderDate] IS NOT NULL) AND ([t8].[OrderDate] IS NOT NULL) AND ([t2].[OrderDate] = [t8].[OrderDate])))
    ),@p3) AS [Bar], COALESCE((
    SELECT SUM([t11].[value])
    FROM (
        SELECT [t10].[UnitPrice] AS [value], [t10].[ProductID], [t9].[OrderDate]
        FROM [Orders] AS [t9]
        INNER JOIN [Order Details] AS [t10] ON [t9].[OrderID] = [t10].[OrderID]
        ) AS [t11]
    WHERE ([t11].[ProductID] > @p4) AND ((([t2].[OrderDate] IS NULL) AND ([t11].[OrderDate] IS NULL)) OR (([t2].[OrderDate] IS NOT NULL) AND ([t11].[OrderDate] IS NOT NULL) AND ([t2].[OrderDate] = [t11].[OrderDate])))
    ),@p5) AS [Baz]
FROM (
    SELECT [t0].[OrderDate]
    FROM [Orders] AS [t0]
    INNER JOIN [Order Details] AS [t1] ON [t0].[OrderID] = [t1].[OrderID]
    GROUP BY [t0].[OrderDate]
    ) AS [t2]

如您所见，Foo、Bar 和 Baz 作为单独的子查询执行。每个子查询 select 和 join 再次。

我期待的会更像这样：

SELECT
  Orders.OrderDate,
  SUM(
    CASE
      WHEN [Order Details].ProductID > 20
      THEN [Order Details].UnitPrice
      ELSE 0
    END
  ) as Foo,
  SUM(
    CASE
      WHEN [Order Details].ProductID > 40
      THEN [Order Details].UnitPrice
      ELSE 0
    END
  ) as Bar,
  SUM(
    CASE
      WHEN [Order Details].ProductID > 60
      THEN [Order Details].UnitPrice
      ELSE 0
    END
  ) as Baz
FROM Orders
JOIN [Order Details] ON Orders.OrderID = [Order Details].OrderID
GROUP BY Orders.OrderDate

是否有可能让底层 linq 提供程序在不使用 ctx.Database.SqlQuery<T> 的情况下为这种情况生成更好的 SQL？

在我的真实场景中，我们谈论的是 7 个连接、嵌套的 group by 以及更多条件。 EF 需要 180 秒，SQL 需要 3 秒。

【问题讨论】：

在这种情况下，解决方案可能是编写一个存储过程来执行查询而不是使用EF。
对于这种情况，我可能会制作自己的 storeprocedure。
这就是 StackOverflow 的人写 Dapper 的原因。
为什么您的 SQL 中的 THEN 和 ELSE 情况相同？ ELSE 不应该是 0 吗？
@juharr 是的，这是一个错误。我的意思是你说的。

标签： c# sql-server performance entity-framework linq-to-sql

【解决方案1】：

如果您想在 LINQ to Entities (EF6) 中获得良好的 SQL 转换，请避免在 GroupBy 运算符的结果上使用 Where。尝试使用等效的条件聚合，例如：

Foo = dateGroup.Sum(e => e.ProductID > 20 ? (decimal?)e.UnitPrice : null) ?? 0,
Bar = dateGroup.Sum(e => e.ProductID > 40 ? (decimal?)e.UnitPrice : null) ?? 0,
Baz = dateGroup.Sum(e => e.ProductID > 60 ? (decimal?)e.UnitPrice : null) ?? 0

【讨论】：