SQL Laravel 5.7 unique() 收集真的很慢

Question

我正在尝试根据具有索引的mobile列通过 Laravel collect和unique方法计算唯一记录的数量。 我有 200,000 行，并且有一个名为optout_csv_schedule_id的列，它与移动设备一起有一个索引。 现在，执行查询已经运行了超过 15 分钟，我该如何提高它的性能，因为我需要计算 200,000 中唯一数字的数量，我当前的查询是：

/**
 * Get valid lead count
 */
protected function getValidLeadCount($schedule_id)
{
    $optoutConnectionLogs = OptoutConnectionLog::where('optout_csv_schedule_id', $schedule_id)
                                               ->get();

    // no leads
    if (!$optoutConnectionLogs) {
        return 0;
    }

    // count total unique leads
    $uniqueLeads = collect($optoutConnectionLogs)->unique('mobile')->count();
    return $uniqueLeads;
}

Answer 1

您没有使用数据库来执行唯一操作，您已经使用->get()获得了记录，并且正在使用 PHP/Laravel 来执行此操作。 这将比使用数据库慢得多。

使用distinct()获取唯一记录，例如：

$optoutConnectionLogs = OptoutConnectionLog::where('optout_csv_schedule_id', $schedule_id)
    ->select('mobile')
    ->distinct()
    ->get();

Answer 2

似乎很难计算Laravel中 200,000 个唯一数字的数量。 尝试改变如下：

protected function getValidLeadCount($schedule_id)
{
    $uniqueLeads = OptoutConnectionLog::where('optout_csv_schedule_id', $schedule_id)
                                                 ->distinct('mobile')
                                                 ->count('mobile');
    return $uniqueLeads;
}

Answer 3

你把所有的数据读入memory，转换成PHP个对象，然后迭代统计数字。 您创建的数据库索引根本没有被使用。

您的需求应该简化为以下代码

return OptoutConnectionLog::where('optout_csv_schedule_id', $schedule_id)
                           ->distinct('mobile')
                           ->count();