SQL查询执行时间过长

Question

我目前正在从事一个项目，该项目需要我扫描Public Whip Raw数据并返回MP名称列表（他们投票赞成与输入的关键字匹配的策略，例如“猎狐”）。当前的SQL查询完成大约需要30秒，这太长了。

这是在“距离”表和“策略”表中查找的SQL查询。 （这是花太长时间才能执行的）

$sql = "SELECT DISTINCT distance.mp_id from distance WHERE distance.distance < 0.2 AND distance.dream_id IN (SELECT dream_id from policy WHERE UPPER(policy.title) LIKE UPPER('%".$keyword."%')) ORDER BY distance.distance LIMIT 5";

这是剩下的只是回显mp名称的代码

$results = mysql_query($sql);
echo "<ul>";
while ($row = mysql_fetch_array($results)) {
    $mpid = $row['mp_id'];
    $sql = "SELECT mp.first_name,mp.last_name FROM mp WHERE mp_id = ".$mpid;
    $result = mysql_query($sql);
    $result = mysql_fetch_assoc($result);
    echo "<li>".$result['first_name']." ".$result['last_name']."</li>\n";
}
echo "</ul>";

Answer 1

这是您的查询：

SELECT DISTINCT distance.mp_id
from distance
WHERE distance.distance < 0.2 AND
      distance.dream_id IN (SELECT dream_id
                            from policy
                            WHERE UPPER(policy.title) LIKE UPPER('%".$keyword."%')
                           )
ORDER BY distance.distance
LIMIT 5;

在某些版本的MySQL中，带子查询的in效率低下。 我还要假设mp_id对于表distance是唯一的。 此查询可能会更好地工作：

SELECT d.mp_id
from distance d
WHERE d.distance < 0.2 AND
      exists (select 1
              from policy p
              where UPPER(p.title) LIKE UPPER('%".$keyword."%') and
                    p.dream_id = d.dream_id
             )
ORDER BY d.distance
LIMIT 5;

通过在policy(dream_id)以及可能的distance(distance)上添加索引，可以进一步改善此查询。

根据策略表的大小，表达式UPPER(policy.title) LIKE UPPER('%".$keyword."%')是性能的主要障碍。 如果你真的是平等的，然后用平等和不like使用通配符。 如果您确实在title栏中存储了多个关键字，则可以考虑将其分解到一个单独的表中，或者使用全文本搜索。