MySQL和JDBC使用rewriteBatchedStatements=true

74

我已经阅读了关于使用rewriteBatchedStatements=true的优点的文章,分别是这里, 这里这里

如果我理解正确,使用rewriteBatchedStatements=true后,JDBC会尽可能将多个查询打包成一个网络数据包,从而降低网络开销。我理解正确吗?

接下来我注意到,MySQL服务器中定义的max_allowed_packet值可能会导致查询出现问题(查询无法在服务器上执行)。

因此,我的第二个问题是,JDBC是否知道分配给max_allowed_packet的值,从而使数据包小于max_allowed_packet的定义值,还是开发人员必须考虑这一点?

如果我理解有误,请告知我。

2
为什么要踩我?能解释一下吗? - dazito
重写批处理语句和hibernate.jdbc.batch_size属性是否相关?我认为batch_size属性决定了一个插入语句中会添加多少个值。请澄清一下! - Dhruv
1个回答

96

当rewriteBatchedStatements=true时,JDBC会尽可能多地将查询打包成单个网络数据包,从而降低网络开销。我说的对吗?

是的。下面的代码

String myConnectionString =
        "jdbc:mysql://localhost:3307/mydb?" +
        "useUnicode=true&characterEncoding=UTF-8";
try (Connection con = DriverManager.getConnection(myConnectionString, "root", "whatever")) {
    try (PreparedStatement ps = con.prepareStatement("INSERT INTO jdbc (`name`) VALUES (?)")) {
        for (int i = 1; i <= 5; i++) {
            ps.setString(1, String.format(
                    "Line %d: Lorem ipsum dolor sit amet, consectetur adipisicing elit, sed do eiusmod tempor incididunt ut labore et dolore magna aliqua. Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat.", 
                    i));
            ps.addBatch();
        }
        ps.executeBatch();
    }
}

即使我已经创建了批处理,它仍会发送单个INSERT语句。

INSERT INTO jdbc (`name`) VALUES ('Line 1: Lorem ipsum ...')
INSERT INTO jdbc (`name`) VALUES ('Line 2: Lorem ipsum ...')

然而,如果我更改连接字符串以包括rewriteBatchedStatements=true

String myConnectionString =
        "jdbc:mysql://localhost:3307/mydb?" +
        "useUnicode=true&characterEncoding=UTF-8" +
        "&rewriteBatchedStatements=true";

然后JDBC将发送一个或多个多行INSERT语句

INSERT INTO jdbc (`name`) VALUES ('Line 1: Lorem ipsum ...'),('Line 2: Lorem ipsum ...')

JDBC是否知道分配给max_allowed_packet的值并因此使数据包小于max_allowed_packet的定义值...?

是的。如果您启用了MySQL常规日志并检查它,您会发现MySQL Connector/J在连接时检查了一堆变量之一是max_allowed_packet。您还可以设置一个小的max_allowed_packet值,验证JDBC将批处理拆分为多个多行INSERT语句,如果整个批处理的单个语句超过max_allowed_packet


7
但是,ACID还存在一个副作用:如果没有使用rewriteBatchedStatements,在插入一部分行时可能出现问题,但现在即使只有一个重复的键,我们也可能什么都无法插入。 - auntyellow
3
小提示:您不应该关闭conps,因为它们将被try-with-resources块自动关闭。 - Benjamin
8
@GordThompson,您知道为什么mysql的rewriteBatchedStatements默认为false吗?启用它是否有任何成本或缺点? - Suren Aznauryan
1
有关这样的事情,最好采用自愿原则,而不是强制性的。但是回答这个问题,它(像所有代码库一样)可能会有错误(希望不会)。https://www.google.com/search?q=rewriteBatchedStatements+bug+site:bugs.mysql.com - granadaCoder

网页内容由stack overflow 提供, 点击上面的
可以查看英文原文,
原文链接