Java JDBC clearBatch() 和堆内存

Question

我注意到以下行为。

我有一个大约 3MB 的文件，其中包含数千行。 在行中，我拆分并创建了准备好的语句（大约 250 000 条语句）。

我做的是：

preparedStatement
addBatch
do for every 200 rows {
 executeBatch
 clearBatch().
}

最后

commit()

内存使用量将增加到 70mb 左右，而不会出现内存不足错误。是否有可能降低内存使用量？并具有事务行为（如果一个失败，所有失败。）。 我可以通过使用executeBatch 和clearBatch 进行提交来降低内存...但这会导致总集的部分插入。

Answer 1

如果一切正常，您可以将所有行插入到具有相同结构的临时表中。让数据库使用：insert into target (select * from temp) 将它们插入到目标表中。 如果导入临时表失败，您没有更改目标表中的任何内容。

编辑：固定语法

Answer 2

您还可以使用 JDBC 2.0“批处理”功能。

1. 使用connection.setAutoCommit(false) 设置您的数据库连接
2. 使用statement.addBatch(sql_text_here) 将批次添加到您的语句中
3. 一旦您的批次全部加载完毕，请使用：statement.executeBatch() 执行它
4. 使用connection.commit() 提交
5. 使用connection.rollback() 捕获异常并根据需要回滚

关于回滚异常处理的更多信息......这是一个典型的回滚异常处理程序：

  catch( BatchUpdateException bue )
  {
    bError = true;
    aiupdateCounts = bue.getUpdateCounts();

    SQLException SQLe = bue;
    while( SQLe != null)
    {
      // do exception stuff

      SQLe = SQLe.getNextException();
    }
  } // end BatchUpdateException catch
  catch( SQLException SQLe )
  {
    ...

  } // end SQLException catch

在此处阅读：http://java.sun.com/developer/onlineTraining/Database/JDBC20Intro/JDBC20.html#JDBC2015