使用 Hibernate 在 CSV 文件中持久化 POJO答案

【问题标题】：Persist POJO in CSV files with Hibernate使用 Hibernate 在 CSV 文件中持久化 POJO
【发布时间】：2023-03-19 23:10:01
【问题描述】：

嘿嘿，

我正在做一个项目，我应该将大量 POJO 文件保存到 Oracle 数据库中。问题是 Hibernate 为每个 POJO 创建一个新的插入 JDBC 请求。当持久化超过 45.000.000 个对象时，这将需要很长时间。我必须将数据保存到数据库中，这些数据将分布在 15 个不同的表中。所以对于每组数据，我必须做 15 条不同的插入语句。当我必须持久化 3.000.000 个数据集时，需要 45.000.000 个插入语句。

当我与一位同事讨论这个问题时，他建议使用 CSV 文件，而不是使用插入语句插入每个 POJO。现在我想知道，有没有一种简单的方法可以让 Hibernate 为每个表写入一个 CSV 文件？

或者也许有人知道更好的解决方案？

【问题讨论】：

最后，CSV 文件也需要加载并插入到数据库中。首先写入文件，然后将文件的内容写入数据库，您会得到什么？
这个批量加载实用程序也必须使用插入语句。而且我不明白为什么 Hibernate 在使用 CSV 文件写入虚构数据库时会比写入真实数据库更快。顺便说一句，这 3,000,000 个数据集来自哪里？
我认为使用批量加载，可以直接写入数据库的文件系统。我认为，让 Hibernate 写入文件必须比通过网络和使用 SQL 使用 JDBC 请求快得多。
Using Hibernate to work with Text Files的可能重复

标签： hibernate csv persistence oracle11g

【解决方案1】：

建议你阅读关于批处理的hibernate章节：http://docs.jboss.org/hibernate/orm/3.3/reference/en/html/batch.html

【讨论】：

我做过很多次。但是做一个大的插入没有任何意义。它只讲述控制多个动作。
哦，也许我误会了。我以为你在问如何批处理插入语句，你可以用会话来做。我猜你已经尝试过了？
是的，现在就是这样。但是即使我批处理所有的插入语句，仍然对于每个对象都会有插入语句。
你正在使用什么 ID 生成策略（如果使用一个？？）
我从 Oracle 数据库中选择了一个序列。我希望我可以改变这个。但是这个序列也被其他用户使用。