Peewee ORM：如何有效地迭代大型结果集

Question

我希望我的程序一旦从MySQL服务器接收到它们就开始处理行（许多行和慢速连接）。

文档建议查询大量行 ： MyModel.select().iterator() 。

但是，似乎首先DB服务器在迭代器产生第一个结果之前发送所有数据（在另一个终端中用tcpdump验证）。

我尝试使用原始数据库驱动程序MySQLdb和pymysql完成此操作，但结果似乎也得到了缓冲。

它可能吗？ 其他Peewee开发人员如何处理迭代大型数据集？

Answer 1

Willem，对于这个问题，Postgresql提供了peewee支持的命名游标（或服务器端游标）：

http://docs.peewee-orm.com/en/latest/peewee/playhouse.html#server-side-cursors

我不是非常熟悉MySQL，但也许它提供类似的东西？

如果不是，您可以始终使用分块迭代器。