【问题标题】:JDBC Batch executing extremely slowJDBC Batch 执行速度极慢
【发布时间】:2012-11-10 08:54:44
【问题描述】:

谁能告诉我我做错了什么我在 mysql 中执行了 350 次插入,这需要 40 秒。

这里是代码

long t0 = System.currentTimeMillis();
        Connection con = connectionProvider.getConnection();
        PreparedStatement s = con.prepareStatement("insert into domkee.friends(idFriends,friend1Id,friend2Id,friend2Name) values(?,?,?,?)");
        con.setAutoCommit(false);
        for (Friend f : friends) {
            s.setLong(1, 0);
            s.setLong(2, f.getFriend1Id());
            s.setLong(3, f.getFriend2Id());
            s.setString(4, f.getFriend2Name());
            s.addBatch();

        }
        long t1 = System.currentTimeMillis() - t0;
        s.executeBatch();
        long t2 = System.currentTimeMillis()-t0;
        con.commit();
        long t3 = System.currentTimeMillis()-t0;
        s.close();
        con.close();
        long t4 = System.currentTimeMillis()-t0;
        System.out.println(((double)t1/1000) + ";" + ((double)t2/1000) + ";" + ((double)t3/1000) + ";" + ((double)t4/1000));

这是控制台:

0.156;39.251;39.376;39.486

所以.executeBatch() 大约需要 40 秒,可能是什么问题?

【问题讨论】:

  • 通过 CLI 或使用工具运行它需要多长时间?
  • 从 MySQL Workbench 来看,它需要的时间大致相同(39-42 秒)。如果相关,服务器是在 AWS 的一个小实例上运行的 MySQL 5
  • 所以我认为它与JAVA无关,我认为您的服务器很慢。
  • 也许您的限制导致它需要很长时间?你有没有运行解释,然后你的查询?
  • 所以你说它是硬件?有什么办法可以让它更快?

标签: java mysql jdbc batch-insert


【解决方案1】:

?rewriteBatchedStatements=true 添加到 JDBC 网址的末尾。它会给你一个严重的性能改进。请注意,这是特定于 MySql 的,不会对任何其他 JDBC 驱动程序产生任何影响。

【讨论】:

猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 2018-04-17
  • 1970-01-01
  • 2015-07-22
  • 1970-01-01
  • 2011-09-10
  • 2017-06-29
  • 2016-02-29
相关资源
最近更新 更多