优化 SQL Server / C# 查询和自定义分页

Question

我有一个如下所示的数据库表：

[Id] [int] IDENTITY(1,1) NOT NULL,
[TransactionID] [bigint] NOT NULL,
[Title] [nvarchar](120) NOT NULL,
[QuantitySoldTransaction] [int] NOT NULL,
[TransactionPrice] [float] NOT NULL,
[ItemID] [bigint] NOT NULL,
[TransactionDate] [datetime] NULL,
[StateOrProvince] [nvarchar](400) NULL,
[CountryName] [nvarchar](400) NULL,
[TwoCountryCode] [nvarchar](200) NULL,
[UserStoreId] [int] NOT NULL,

我必须通过这些参数对这些交易进行分组：

• ItemID => 商品销售额
• CountryName => 各国销售额
• 交易日期 => 销售日期
• 交易日期 => 一天中的小时销售额
• 交易日期 => 星期几的销售额

我有几件事我不完全理解我应该如何实现它。

例如，我显示的每个项目的销售额数据在不同的视图中完全分开，并且每个国家、小时和一周中的每一天的销售额也显示在不同的视图中。

我想在 Web 应用程序中引入自定义分页，这样我就可以避免一次从服务器中提取所有数据，从而减少服务器上的负载。

每次我拉出所有记录时，我都必须做一个 group by 语句来获取所需的数据。

例如：

ViewBag.Transactions = allStoreItems.GroupBy(x => x.ItemID)
  .Select(pr => new TransactionsTabResults
  {
      Title = pr.Select(x=>x.Title).FirstOrDefault(),
      ItemID = pr.Key.ToString(),
      AveragePrice =  Math.Round(pr.Average(y => y.TransactionPrice), 2),
      TotalSoldItems = pr.Sum(x => x.QuantitySoldTransaction),
      TotalRevenuePerItem = Math.Round(Convert.ToDecimal(pr.Sum(x => x.TransactionPrice * x.QuantitySoldTransaction)), 2)

  }).OrderByDescending(x => x.TotalRevenuePerItem).ToList();

这些将是每个项目单独的销售额（每个项目 ID 的销售额）。这里可怕的是我一次提取所有数据，然后将其注入到用户的 DOM 中，这对最终用户和服务器来说性能都很糟糕。

我认为唯一的解决方案是自定义分页，这应该可以减少服务器上的负载。

所以我的问题是：如果我创建一个可以进行自定义分页的存储过程，但每次用户发出请求时仍会按分组进行，我猜这仍然具有糟糕的性能，因为分组的成本很高对吧？

所以我的想法是在我的以下之间创建一个表：

UserStores => New Table Here <= StoreTransactions

新表将包含每个参数的分组数据：

1. 按一般日期（每月 30 天）、按项目 ID、按日期（按 24 小时）和再次按日期（按一周中的 7 天）..

所以这里的另一个问题是：多对多表是否会降低 SQL 查询的成本，从而使我能够更顺畅地对记录进行分页并显示我想要的内容？

Answer 1

我假设给定的表类似于您问题中的 StoreTransactions 表。老实说，我不认为你建议的中间有一张桌子会有效。

我要做的是，假设您在 IDENTITY (Id) 列之上有一个唯一的聚集索引，为您需要的查询添加额外的覆盖非聚集索引。也就是说，如果索引开销不是问题。最重要的是，我会为您可能需要的每个“分组”编写一个单独的存储过程，并使该存储过程的输入参数包括 @pageSize 和 @pageNumber。然后，根据您使用的 SQL Server 版本：

• 如果您的 SQL Server 是 2012 或更高版本，请使用 OFFSET - FETCH 子句 (documentation)
• 如果您的 SQL Server 是 2008R2 或更早版本，请在其中使用 CTE 和 ROW_NUMBER() 窗口函数来模拟分页 like so

我的建议是，对于项目分组和 SQL Server 2012 或更新版本，例如：

-- setting up my environment
CREATE TABLE dbo.StoreTransactions (
    [Id] [int] IDENTITY(1,1) NOT NULL,
    [TransactionID] [bigint] NOT NULL,
    [Title] [nvarchar](120) NOT NULL,
    [QuantitySoldTransaction] [int] NOT NULL,
    [TransactionPrice] [float] NOT NULL,
    [ItemID] [bigint] NOT NULL,
    [TransactionDate] [datetime] NULL,
    [StateOrProvince] [nvarchar](400) NULL,
    [CountryName] [nvarchar](400) NULL,
    [TwoCountryCode] [nvarchar](200) NULL,
    [UserStoreId] [int] NOT NULL,
    CONSTRAINT PK_StoreTransactions PRIMARY KEY(Id) -- this makes a unique clustered index on the Id column
);
GO

-- making a covering index for the calculations
CREATE NONCLUSTERED INDEX IX_StoreTransactions_Title_TransactionPrice_QuantitySoldTransaction
    ON dbo.StoreTransactions(Title, TransactionPrice, QuantitySoldTransaction);
GO
-- making an index for the ItemID example
CREATE NONCLUSTERED INDEX IX_StoreTransactions_ItemID
    ON dbo.StoreTransactions(ItemID);
GO

-- stored procedure grouped by ItemID
CREATE PROCEDURE dbo.ReturnPaginatedDataByItemID
    -- set your defaults
    @pageNumber int = 1,
    @pageSize int = 10
AS
BEGIN
    SET NOCOUNT ON;

    SELECT 
          MIN(t.Title) AS Title -- this is based on your FirstOrDefault() function
        , t.ItemID
        , AVG(t.TransactionPrice) AS AveragePrice
        , SUM(t.QuantitySoldTransaction) AS TotalSoldItems
        , SUM(t.TransactionPrice*t.QuantitySoldTransaction) AS TotalRevenuePerItem
    FROM dbo.StoreTransactions t
    GROUP BY t.ItemID
    ORDER BY TotalRevenuePerItem DESC   -- order is required for the evaluator to be able to know which rows from pages to take
    OFFSET @pageSize * (@pageNumber - 1) ROWS FETCH NEXT @pageSize ROWS ONLY;
END;

您还可以在存储过程中使用一个附加参数，该参数接受您想要分组的属性的名称，然后您有两个使用它的选项：

• 根据该参数制作IF - ELSE 语句并执行适当的SELECT's
• 将写入的选择转换为nvarchar(max)，然后动态插入要选择和分组的内容，而不是我示例中的ItemID；最后，您只需使用sp_executesql 执行该动态查询

注意：确保不要忘记为其他列创建覆盖索引，就像我为 ItemID 制作的示例一样。