Java MySQL jdbc与Hibernate一起执行Select查询

Question

对于这个模糊的问题，我们深表歉意，因为我不知道如何用恰当的句子来写它，如果您想对它进行更有意义的编辑，请继续。

我实际上想问，什么时候我们做这样的事情：

Select * from TableWithBillionRecords Limit 1000000

使用任一结果集：

PreparedStatement.executeQuery()

或休眠：

getCurrentSession().createQuery(query).list()

一旦执行了该行，这是否意味着Web服务器实际上从我的数据库服务器中提取了整整100万行？ 还是接口背后隐藏着一些流逻辑？

感谢您提供的信息，因为它可以帮助我确定是否应该将其拆分为多个查询，逐个选择一个块，或者实际上只选择一整堆都可以。

再次感谢你们。

Answer 1

大多数JDBC驱动程序的默认访存大小为10。

在普通的JDBC编程中，如果要检索1000行，则需要在应用程序和数据库服务器之间进行100次网络往返传输所有数据。 无疑，这会影响您的应用程序响应时间。

原因是JDBC驱动程序旨在从数据库中获取少量行，以避免出现内存不足的问题。

例如，如果您的查询检索到100万行，则JVM堆内存可能不足以容纳大量数据，因此JDBC驱动程序被设计为一次检索少量（10行）的行，从而可以支持任意数量的行。只要您有更好的设计来处理应用程序编码中的大行集，行数就可以了。

如果将提取大小配置为100，则到数据库的网络旅行次数将变为10。这将大大提高应用程序的性能。

调整提取大小时要考虑的重要注意事项：

确保您的JDBC驱动程序支持配置提取大小。
提取大小应基于您的JVM堆内存设置。 由于JVM堆大小在不同的环境之间会有所不同，因此请不要对获取大小进行硬编码，以使其保持为可配置参数。
如果获取大小很大，则可能会遇到内存不足的问题。 例如，较少数量的列表可能比较大数量的列支持大行读取大小。
您可以基于某些数据类型（例如blob，image等）设置获取大小。我们对列遵循某些命名约定，例如，所有image和blob列的后缀均为“ Blob”。 如果查询中不包含“ Blob”字样，则设置较高的提取大小，否则设置较低的提取大小。

Answer 2

默认情况下， Hibernate会急切地获取结果，因为与数据库的大多数交互操作通常都是这样：提取几条记录，显示它们，可能修改它们，然后再次存储。

提取数百万行是一个完全不同的用例，主要用于以下情况：

具体来说， Hibernate没有提供任何方法来像在JDBC或某些其他ORM中那样在数据库中保留惰性游标并进行惰性滚动。 但这不是必须的。 您始终可以在Hibernate项目中求助于纯JDBC。