创建结构良好的大型 SQL 数据库

Question

我有一个表，其中包含我们服务器的所有 Windows 事件日志（从日志服务器中提取）。

一开始还可以，当我往里面放更多数据时，它变得越慢……现在是几百万行。

所以我认为最好将每台服务器分解成自己的表，这样可以更快地进行特定查询。

问题是，如果我想在所有服务器上搜索事件怎么办？

所以我来这里是为了获得一些关于如何正确设置我的桌子的建议。

下面是 CREATE TO.. 复制和粘贴每个表的结构，将“server1”替换为实际名称。

使用 [Events_Data] 走 /****** 对象：表 [dbo].[servername1] 脚本日期：8/18/2017 8:48:59 AM ******/ 设置 ANSI_NULLS ON 走 设置 QUOTED_IDENTIFIER ON 走 创建表 [dbo].[servername1]( [消息] [nvarchar](max) NULL， [Id] [nvarchar]（最大值）NULL， [版本] [nvarchar](max) NULL, [限定符] [nvarchar](max) NULL, [级别] [nvarchar]（最大值）NULL， [任务] [nvarchar]（最大）NULL， [操作码] [nvarchar](max) NULL, [关键词] [nvarchar](max) NULL, [RecordId] [nvarchar](最大值) NULL, [提供者名称] [nvarchar]（最大值）NULL， [ProviderId] [nvarchar](max) NULL, [LogName] [nvarchar]（最大值）NULL， [ProcessId] [nvarchar](max) NULL, [ThreadID] [nvarchar](max) NULL， [机器名] [nvarchar]（最大值）NULL， [用户 ID] [nvarchar](最大) NULL, [时间创建] [日期时间] NULL， [ActivityId] [nvarchar]（最大值）NULL， [RelatedActivityID] [nvarchar](max) NULL， [ContainerLog] [nvarchar](max) NULL， [MatchedQueryIDs] [nvarchar](max) NULL, [书签] [nvarchar](max) NULL, [LevelDisplayName] [nvarchar]（最大值）NULL， [OpcodeDisplayName] [nvarchar](最大值) NULL, [TaskDisplayName] [nvarchar]（最大值）NULL， [KeywordsDisplayNames] [nvarchar]（最大值）NULL， [属性] [nvarchar](max) NULL ) ON [PRIMARY] TEXTIMAGE_ON [PRIMARY] 走

我已附加了来自服务器的一行数据...每个表都非常相似，除了“机器名”列特定于该表为其保存事件的服务器。

Message,Id,Version,Qualifiers,Level,Task,Opcode,Keywords,RecordId,ProviderName,ProviderId,LogName,ProcessId,ThreadID,MachineName,UserID,TimeCreated,ActivityId,RelatedActivityID,ContainerLog,MatchedQueryIDs,Bookmark,LevelDisplayName,OpcodeDisplayName,TaskDisplayName,关键字显示名称、属性 任何错误消息,1000,,0,2,100,,3.60288E+16,302366,Application Error,,Application,,,servernameapp1.domain.com,,00:03.0,,,\\servernamelogs\d$\windows-logs \archive-forwardedevents-2017-04-01-05-03-29-167.evtx,,System.Diagnostics.Eventing.Reader.EventBookmark,错误,信息,应用程序崩溃事件,经典,System.Diagnostics.Eventing.Reader。 EventProperty System.Diagnostics.Eventing.Reader.EventProperty System.Diagnostics.Eventing.Reader.EventProperty System.Diagnostics.Eventing.Reader.EventProperty System.Diagnostics.Eventing.Reader.EventProperty System.Diagnostics.Eventing.Reader.EventProperty System.Diagnostics。 Eventing.Reader.EventProperty System.Diagnostics.Eventing.Reader.EventProperty System.Diagnostics.Eventing.Reader.EventProperty System.Diagnostics.Eventing.Reader.EventProperty System.Diagnostics.Eventing.Reader.EventProperty System.Diagnostics.Eventing.Reader.EventProperty System.Diagnostics.Eventing.Reader.EventProperty

任何有关创建结构良好的数据库的帮助，我都可以查询所有表，我们将不胜感激！

Answer 1

哇。这有很多问题，但作为一个开始：

1. 在最常用的键列或人工键上创建主键和聚集索引（在这种情况下看起来像 id？）
2. 更改您的数据类型... Varchar(MAX) 是一个无限长度的字符串...您的 Id 列可能应该是 Ints，而事件字符串列应限制在其合理的最大长度内。
3. 使必填列不可为空
4. 在任何连接/排序/位置列上创建非聚集索引

不要不要为每台服务器创建一个表。只需在 ServerId 列上创建一个索引...

附：你确定你需要所有这些列吗？你是如何插入它们的？有些看起来他们只是在输入对象的类型，例如。 System.Diagnostics.Eventing.Reader.EventProperty 在最后一列。您可能需要一个 .ToString() 或其他东西来获得实际值。但我会质疑您是否真的需要所有这些列。