如何在 MYSQL 中快速更新 100 万行 [重复]

Question

这个问题在这里已经有了答案：

在 mysqli 中插入许多值的最佳方法？ (4 个回答)

4 个月前关闭。

我只有 1 个包含 100 万行的表需要更新。 我需要更新的数据在 file.txt 中，它只有 1 个值在 100 万行中更新。

我使用 PHP 读取文件并进行更新。

问题是时间。 这么慢。 有什么改进和提高速度的想法吗？

我所拥有的是：

UPDATE productos SET urlRedirect = getChangeProducto WHERE url LIKE 'getUrlProducto'

TXT 文件，由 (;) 分隔的 2 个值首先是 getChangeProducto 和第二个 getUrlProducto：

https://www.example.com/guess/8595651?o=34&t=direct&f=102.301&ord=111;https://example.com/p/guess-jeans-116-175-cm-327554`

PHP 文件：

$mysqli = get_dbc();
    if ($mysqli->connect_errno) {
    echo "Failed to connect to MySQL: (".$mysqli->connect_errno.") ".$mysqli->connect_error;
    exit();
}
$mysqli->set_charset("utf8");

if (!$mysqli) exit(mysqli_connect_error());

$handle = fopen("fileToUpdate.txt", "r");
$total_lines = 0;

if ($handle) {
    $line = fgets($handle);
    while ($line !== false) {
        $url_to_delete = trim($line);
        $trozos = explode(";", $url_to_delete);
        $total_lines++;
        if ($stmt = $mysqli->prepare("UPDATE productos SET urlRedirect = ? WHERE url = ? ")) {
            $stmt->bind_param('ss', $trozos[1],$trozos[0]);
            $stmt->execute();   // Execute the prepared query.
        }
$stmt->close();
        $line = fgets($handle);
    }
    fclose($handle);
}
// Output — Total Lines: 6305.
echo "Total Lines: $total_lines.\n";

Answer 1

我之前也遇到过这个问题。 那是在 2009 年或 2010 年左右，由于请求超时，我需要快速更新多个条目。 我发现的一些解决方案是扩展服务器的请求超时配置，但我发现的另一个解决方案是在数据库服务器上创建一个临时表并关联这两个表，但不幸的是，我无法与您分享链接，因为那是很长时间前。 因此，只要我记得，我就在这里做了：

1. 创建一个与您的 CSV 具有类似结构的临时表，其中包含与您要执行更新的表相关的主键。 我知道 MySQL 具有临时表功能。
2. 从您的 CSV 中，通过一次插入记录来上传数据（在 INSERT 语句中按批次或多个值）。 这会很快
3. 插入所有记录后，将临时表与 UPDATE 语句中的表相关联。
4. 示例： UPDATE orig_table ot, temp_table tt SET ot.URLRedirect=tt.URLRedirect WHERE ot.ID=tt.ID
5. 销毁您的临时表。

UPDATE 语句会将 orig_table 的值设置为 temp_table 中的新值，前提是它们通过它们的 ID 关联。