使用 postgres 和 java 执行 sql 查询时内存泄漏

Question

我需要在 postgres DB 上使用 java 运行一些查询。问题是当我使用此代码执行查询时，我的内存增加了，即使我关闭了语句并且结果集内存仍在增加。当然，GC 会被执行，但问题是有时 GC 是在查询执行过程中执行的，它会改变我查询的执行时间。我如何解决这个问题以防止在 SQL 查询中间执行 GC 并在我的情况下防止内存泄漏？

 public long getStatementExecutionTimeInMilliseconds( final String sqlQuery, 
final int fetchSize, final boolean fetchAttributesFlag,
            Integer numberOfSelectedFields) throws SQLException {

        Statement stmt = null;
        ResultSet rs = null;
        int numberOfResult = 0;
        if (numberOfSelectedFields == null) {
            numberOfSelectedFields = getNumberOfSelectedFields(sqlQuery);
        }
        long start = 0;
        try {
            stmt = createStatement (fetchSize);
            stmt.executeQuery (sqlQuery);
            start = System.currentTimeMillis ();
            rs = stmt.executeQuery (sqlQuery);
            while (rs.next ()) {
                if (fetchAttributesFlag) {
                    for (int i = 1; i <= numberOfSelectedFields; i++) {
                        rs.getInt (i);
                    }
                }
            }

            stmt.close ();
        }

        finally {
            DatabaseUtils.tryClose(rs);
            DatabaseUtils.tryClose(stmt);
        }
        //System.out.println (numberOfResult);
        final long executionTimeInMilliseconds = System.currentTimeMillis() - start;


        return executionTimeInMilliseconds;
    }

Answer 1

默认情况下，PostgreSQL JDBC 驱动程序会将整个结果集存储到 RAM 中。

要改变这一点，请将 fetch size 设置为不同于 0 的值。然后将使用游标，并且内存消耗应该是稳定的。

来自the documentation：

// make sure autocommit is off
conn.setAutoCommit(false);
Statement st = conn.createStatement();

// Turn use of the cursor on.
st.setFetchSize(50);