如何从大量数据创建数组？

Question

我正在从mySQL数据库中选择很多数据：

 $sql = "SELECT * FROM data WHERE id = ?";  
 $q = $pdo->prepare($sql);
 $q->execute([$id]);
 $array = $q->fetchAll(PDO::FETCH_ASSOC);

 var_dump($array);

我想将此数据存储到一个数组中，并在循环后使用此数组。 现在的问题是，我有大量的数据，正在加载和加载阵列，而我的系统不堪重负。 有没有一种方法可以创建包含大量数据且性能更好的阵列？

Answer 1

fetchAll()函数将整个记录映射到变量。

每次迭代映射一行会更快

$q->execute([$id]);

$i = 0;
while ($row = $q->fetch()) {
    // do something with $row
    $i++;
}

Answer 2

请使用提取功能，而不是像下面这样提取所有内容：

while ($arr = $stmt->fetch()){
   // do_other_stuff(); 
}

这将减少系统的负载。

请看这个

Answer 3

我目前正在处理12,000行并将其编码为JSON数组，我认为这对我来说是最好的。

$sql = mysqli_query($dbconn, "SELECT * FROM data WHERE id = ?");

$rows = array();
    while($r = mysqli_fetch_assoc($sql)) {
    $rows[] = $r;
    }

然后回显（或者在我的情况下回显json_encode）。

Answer 4

要考虑的主要事项是：

1. 该表数据会进一步增加吗？ （已经很大了：））

不建议/建议每次循环500k条记录。 它肯定会影响速度/性能。

我建议以下选择：

1. 在表格中放置一个字段以标识最高的文件夹（类似于“排序顺序”字段）-随时根据需要正确更新。 这样我们就可以首先获取最高的文件夹，并且如果有一个字段可以标识父文件夹，那么您可以轻松地构建一棵树。
2. 考虑一个表，该表存储带有主表外键的最高文件夹。 相应地更新此内容，以便您可以轻松确定最高文件夹。

PS：您可以考虑使用CRON处理数据并根据需要更新排序顺序。