Oracle 和 JDBC 性能：INSERT ALL 与preparedStatement.addBatch

Question

我有一个带有 Oracle 数据库后端的 Java 应用程序，我需要在其中插入多行。我看过关于 inserting multiple rows into Oracle 的讨论，但我也对混合使用 JDBC 对性能的影响感兴趣。

我看到了一些可能性：

选项 1： 使用单行插入 PreparedStatement 并多次执行：

String insert = "Insert into foo(bar, baz) values (?, ?)";
PreparedStatement stmt = conn.prepareStatement(insert);
for(MyObject obj : someList) {
    stmt.setString(1, obj.getBar());
    stmt.setString(2, obj.getBaz());
    stmt.execute();
}

选项 2： 构建一个 Oracle INSERT ALL 语句：

String insert = "INSERT ALL " +
    "INTO foo(bar, baz), (?, ?) " +
    "INTO foo(bar, baz), (?, ?) " +
    "SELECT * FROM DUAL";
PreparedStatement stmt = conn.prepareStatement(insert);
int i=1;
for(MyObject obj : someList) {
    stmt.setString(i++, obj.getBar());
    stmt.setString(i++, obj.getBaz());
}
stmt.execute();

选项 3： 使用 PreparedStatement 的 addBatch 功能：

String insert = "Insert into foo(bar, baz) values (?, ?)";
PreparedStatement stmt = conn.prepareStatement(insert);
for(MyObject obj : someList) {
    stmt.setString(1, obj.getBar());
    stmt.setString(2, obj.getBaz());
    stmt.addBatch();
}
stmt.execute();

我猜另一种可能性是创建一个 CSV 文件并使用 SQL 加载器，但我不确定如果加上创建 CSV 文件的开销，这是否真的会更快...

那么哪个选项的执行速度最快？

Answer 1

将PreparedStatement 的addBatch() 功能用于1,000,000 行以下的任何内容。

您添加到代码中的每个附加组件都会增加依赖关系和故障点。

如果你走这条路（外部表、sql 加载器等），请确保它真的值得。

将数据序列化为 csv 文件，将其移动到数据库可读的位置将很容易花费一秒钟左右的时间。

在那段时间里，如果我只是吸收它并开始使用 JDBC 插入，我可以插入 20,000 行。

Answer 2

即使没有直接路径加载，SQL Loader 似乎也是更好的方法，但它很难维护。 批量插入比单个插入语句快 2-4 倍。 像批量插入一样插入所有内容，这两者都会比 PL/SQL 实现更快。

您可能还想阅读this AskTom 主题。

Answer 3

使用批处理对程序员来说是透明的。这是来自here的引用：

设置连接批量值

您可以为 Oracle 连接中的任何 Oracle 准备语句指定默认批处理值。 > 为此，请使用 OracleConnection 对象的 setDefaultExecuteBatch() 方法。例如，以下代码将与 conn 连接对象关联的所有准备好的语句对象的默认批处理值设置为 20：

((OracleConnection)conn).setDefaultExecuteBatch(20);

即使这为连接的所有准备好的语句设置了默认批处理值，您也可以通过在各个 Oracle 准备好的语句上调用 setDefaultBatch() 来覆盖它。

连接批处理值将应用于设置此批处理值后创建的语句对象。