Rownum 或 Fetch/offset 适合选择和处理数百万条记录

Question

我想从 oracle 读取数百万条记录并通过 Java 传输到另一个表。由于某种原因，我们正在使用 Java 进程，我们正在这样做。

我想问一下从表中选择记录的最佳方法，例如一次 1000 条记录。rownum 是好的还是 12c 中的 Fetch/Offset？

例如，如果表有 10000 条记录，我可以使用以下查询。

select *
from table
first 500 rows only  -- first time

select *
from table
offset 500 next 500 rows only

... 第二次（这次是 oracle 再次获取 1000 条记录并将 500 行发送到结果集 ..）

select *
from table
offset 1000 next 500 rows only

....这一次 oracle 是否再次获取 1500 条记录并发送 500 行到 resulset...

...等等

所以我不确定 Rownum 是一次选择 500 条记录还是偏移/获取方法的最佳方法......需要建议......

Answer 1

您想从数据库 #1 中的表中提取数百万行，将它们拉到与 Java 应用程序的带宽相对较低的连接，以便您可以按摩它们，然后您想转身并推送这些相同的行UP 相同的连接，将它们放入数据库#2 - 你知道为什么这可能不是一个好的选择吗？ :-)

更好 - 在数据库 #1 中构建一个临时表，然后在填充临时表后，使用 Oracle 到 Oracle 数据库连接将数据从数据库 #1 推送到数据库 #2。

类似：

Database #1
  CREATE TABLE TEMP_TABLE AS
    SELECT FIELD1,
           FIELD2,
           SUM(FIELD3)  -- or whatever
      FROM TABLE1
      WHERE WHATEVER = SOMETHING_ELSE
      GROUP BY FIELD1,
               FIELD2

  Run whatever PL/SQL procedures, etc, are needed to massage your data and make it 
  pretty.

Database #2
  CREATE TABLE PRETTY_BRAND_NEW_TABLE AS
    SELECT *
      FROM TEMP_TABLE@db1;

根据我的经验，这是您的最佳选择。 YMMV。

祝你好运。