原创

Spring的JDBCTemplate批量更新的性能问题

Spring的JDBCTemplate批量更新的性能问题

这两天偶然发现了一个JDBCTemplate批量更新的性能问题,问题是这样的一次性批量删除并且插入3000条记录,居然用了400s我也是被吓到了。我也看了一下代码确实用的是jdbcTemplate的batchUpdate方法,用法都没有错,正常执行SQL批量更新3000条数据应该也是秒级的,但是不清楚为什么使用jdbcTemplate的性能会和预期差这么多呢,后来经过反复测试才发现原来是参数类型惹的祸,具体请看下面的代码片段。

修改前的jdbcTemplate.batchUpdate代码片段

public void batchUpdateAcl(List<Auth> authBeans) {
    List<Object[]> deleteParams = new ArrayList<Object[]>();
    List<Object[]> insertParams = new ArrayList<Object[]>();

    for (Auth auth : authBeans) {
        String resourceID = auth.getResourceID();
        String targetID = auth.getTargetID();
        String targetType = auth.getType() == null ? AuthTargetType.ROLE.name() : auth.getType().name();
        int acl = AuthEnum.formateAclCode(auth.getAcls());

        deleteParams.add(new Object[] { targetID, resourceID, targetType });
        insertParams.add(new Object[] { targetID, resourceID, targetType, acl });
    }

    String sql = "DELETE FROM " + TABLE_NAME + " WHERE target=? AND resource=? and targetType=?";
    // 批量删除修改前的调用方式
    jdbc.batchUpdate(sql, deleteParams);

    sql = "INSERT INTO " + TABLE_NAME + " (target, resource, targetType, acl) VALUES(?,?,?,?)";
    // 批量插入修改前的调用方式
    jdbc.batchUpdate(sql, insertParams);
}

修改后的jdbcTemplate.batchUpdate代码片段

public void batchUpdateAcl(List<Auth> authBeans) {
    final List<Object[]> deleteParams = new ArrayList<Object[]>();
    final List<Object[]> insertParams = new ArrayList<Object[]>();

    for (Auth auth : authBeans) {
        String resourceID = auth.getResourceID();
        String targetID = auth.getTargetID();
        String targetType = auth.getType() == null ? AuthTargetType.ROLE.name() : auth.getType().name();
        int acl = AuthEnum.formateAclCode(auth.getAcls());

        deleteParams.add(new Object[] { targetID, resourceID, targetType });
        insertParams.add(new Object[] { targetID, resourceID, targetType, acl });
    }

    String sql = "DELETE FROM " + TABLE_NAME + " WHERE target=? AND resource=? and targetType=?";
    // 批量删除修改后的调用方式
    jdbc.batchUpdate(sql, new BatchPreparedStatementSetter() {
        @Override
        public void setValues(PreparedStatement ps, int i) throws SQLException {
            Object[] args = deleteParams.get(i);
            ps.setString(1, (String) args[0]);
            ps.setString(2, (String) args[1]);
            ps.setString(3, (String) args[2]);
        }

        @Override
        public int getBatchSize() {
            return 0;
        }
    });

    sql = "INSERT INTO " + TABLE_NAME + " (target, resource, targetType, acl) VALUES(?,?,?,?)";
    // 批量插入修改后的调用方式
    jdbc.batchUpdate(sql, new BatchPreparedStatementSetter() {
        @Override
        public void setValues(PreparedStatement ps, int i) throws SQLException {
            Object[] args = insertParams.get(i);
            ps.setString(1, (String) args[0]);
            ps.setString(2, (String) args[1]);
            ps.setString(3, (String) args[2]);
            ps.setString(4, (String) args[3]);
        }

        @Override
        public int getBatchSize() {
            return 0;
        }
    });
}

具体调用的方式有些变化,原来的调用方式jdbc.batchUpdate(sql, deleteParams);的参数是List\

正文到此结束
Loading...