发现重复键时丢失剩余的批处理 SQL 查询

Question

谁能建议我如何将批量查询插入到 Apache Derby 数据库中，同时仍能以良好的性能处理重复条目？

作为尝试平衡性能和在 INSERT 上处理重复键的能力的最后手段，我决定让 JDBC / Derby 告诉我批处理查询何时会导致重复键，捕获错误，然后继续剩余的批处理查询。

不幸的是，一旦检测到错误，它似乎就清除了整批查询，这意味着我丢失了所有剩余的记录。

我尝试过的事情：

• 执行程序查询以确定条目是否已经存在。放弃了这个，因为数据当前可能是批量的，所以会丢失。
• 仅当记录不存在时才使用 SQL 查询插入。放弃了这个，因为它导致了糟糕的 INSERT 性能（下降了近 70%）。
• 让数据库告诉我有关重复键的信息，捕获错误并继续处理批处理。即将放弃这一点，因为它“忘记”批处理中还有其他查询要处理。

如果只有 Derby 支持 INSERT IGNORE。

谢谢

Answer 1

JDBCsays，它是一个驱动可能在出错后继续执行批处理语句：

如果批量更新中的某个命令未能正确执行， 此方法会引发 BatchUpdateException，并且 JDBC 驱动程序可能会或 可能不会继续处理批处理中的剩余命令。

现在 derby 文档 state 在嵌入式模式下，如果遇到错误，批处理会停止，而网络驱动程序会继续：

批处理过程中遇到的错误情况的处理 java.sql.Statement、java.sql.PreparedStatement 和 java.sql.CallableStatement 不同。使用嵌入式驱动程序 遇到错误时停止处理； 网络客户端 驱动程序 处理继续，但适当的值定义在 java.sql.Statement api 在结果更新计数中返回 数组。

但鉴于您想要执行 INSERT IGNORE，您可以简单地使用 Derby 支持的 MERGE statement。