在休眠状态下从表中批量获取

Question

我有一个表，我正在从该表中获取大约 250,000 条记录，这需要大约 25 分钟，有没有办法减少获取时间。我正在使用如下代码：-

query.setParameterList("studentId", StudentIdList);

有没有办法优化它？

Answer 1

如果从 SQL 命令行花费的时间不到 10 分钟，而从 Hibernate 花费的时间超过 25 分钟，那么您可能需要查看 批处理。特别是，您可能会从无状态会话中受益（特别是如果您没有做太多工作）。如果您确实没有做太多工作，您也许可以使用 DML 语句（也在该 URL 中）。

Answer 2

有没有办法优化它？

如果您想让速度更快，您可以批量导出并从文件加载。或者只是不使用数据库；）

您可以使用其他方法来存储数据，速度会更快。您可能会通过数据库获得这样的性能，但有时最简单的方法是最好的。

public static void main(String... args) throws IOException {
    File file = new File("students.csv");

    PrintWriter pw = new PrintWriter(file);
    for (int i = 0; i < 250 * 1000; i++)
        pw.println("student " + i + ", last " + i + ", email.address" + i + "@my-school.com," + i);
    pw.close();

    long start = System.nanoTime();
    BufferedReader br = new BufferedReader(new FileReader(file));
    List<Student> students = new ArrayList<Student>();
    for (String line; ((line = br.readLine()) != null);) {
        int pos = line.indexOf(',');
        int pos2 = line.indexOf(',', pos + 1);
        int pos3 = line.indexOf(',', pos2 + 1);
        students.add(new Student(line.substring(0, pos), line.substring(pos + 1, pos2), line.substring(pos2 + 1, pos3), Integer.parseInt(line.substring(pos3 + 1))));
    }
    br.close();
    long time = System.nanoTime() - start;
    System.out.printf("Time to load %,d students was %.1f ms.%n", students.size(), time / 1e6);
}

我使用 http://introcs.cs.princeton.edu/java 中的 Student /32class/Student.java.html

打印

Time to load 250,000 students was 228.7 ms.