使用 java 的大型 SQL 数据集查询答案

【问题标题】：Large SQL dataset query using java使用 java 的大型 SQL 数据集查询
【发布时间】：2011-10-05 14:54:53
【问题描述】：

我有以下配置：

基本上我想要做的是在表上使用 where 子句进行选择。问题是该表有大约 700M 条目，查询需要很长时间。

您能否指出一些关于在何处优化查询的指示，或者我可以使用哪些技术来提高性能？

谢谢。

【问题讨论】：

【解决方案1】：

使用索引是用于处理此问题的标准技术。根据要求，这里有一些建议可以帮助您入门：

【讨论】：

【解决方案2】：

在这种情况下，我要做的第一件事是隔离我返回的数据量是否是问题（I/O 问题）。一种简单的非科学方法是将查询更改为仅返回计数：

select count(*) --just return a count, no data!
from MyTable
inner join MyOtherTable on ...
where ...

如果它运行得非常快，它会告诉您您的索引是有序的（假设您的 WHERE 子句中没有子选择）。如果没有，那么您需要work on indexes、WHERE 子句或您的查询构造本身（正在完成连接等）。

一旦满意，请重新添加您的SELECT 子句。如果速度很慢，您将不得不查看您的数据访问模式：

【讨论】：

【解决方案3】：

我会运行 Profiler 来查找正在生成的确切查询。 ORM 可以创建不太理想的查询。知道查询后，您可以在 SSMS 中运行它并查看执行计划。这将为您提供有关性能问题的线索。

可能导致性能问题的几件事：

还有更多（毕竟所有很长的书都是关于这个主题的），但这应该足以让你开始看哪里。

【讨论】：

如果没有足够的工具和知识，查询调优会变得复杂而令人生畏。很好的答案；我要注意的另一件事是 Hibernate 想要为您生成查询。如果查询需要针对性能进行调整，您需要告诉 Hibernate 使用您的特定查询。

【解决方案4】：

您应该为那些经常用来限制结果的列提供一些索引。另一件事是结果集的分页。

【讨论】：

【解决方案5】：

不管具体的数据库，我都会做以下事情：

【讨论】：