Peewee ORM：如何有效地迭代大型結果集

Question

我希望我的程序一旦從MySQL服務器接收到它們就開始處理行（許多行和慢速連接）。

文檔建議查詢大量行 ： MyModel.select().iterator() 。

但是，似乎首先DB服務器在迭代器產生第一個結果之前發送所有數據（在另一個終端中用tcpdump驗證）。

我嘗試使用原始數據庫驅動程序MySQLdb和pymysql完成此操作，但結果似乎也得到了緩沖。

它可能嗎？ 其他Peewee開發人員如何處理迭代大型數據集？

Answer 1

Willem，對於這個問題，Postgresql提供了peewee支持的命名游標（或服務器端游標）：

http://docs.peewee-orm.com/en/latest/peewee/playhouse.html#server-side-cursors

我不是非常熟悉MySQL，但也許它提供類似的東西？

如果不是，您可以始終使用分塊迭代器。