简单的MySQL选择查询需要4个小时

Question

如有新手帮助，我将不胜感激。 我应用以下SQL：

INSERT INTO t03_hesid_history(uniqueID, hes_data_all_years.extract_hesid, FIELD1, FIELD2)  
SELECT uniqueID, hes_data_all_years.extract_hesid, FIELD1, FIELD2  
FROM hes_data_all_years  
INNER JOIN T02_hesid_grouped  
ON hes_data_all_years.extract_hesid = T02_hesid_grouped.extract_hesid;

hes_data_all_years表具有1.88亿条记录，而T02_hesid_grouped表具有80,000条记录。 T02_hesid_grouped表具有一个名为extract_hesid的单个（唯一）字段，该字段已建立索引。 hes_data_all_years具有许多字段，并且正在联接的extract_hesid字段上有一个索引。

该查询旨在提取hes_data_all_years中的所有记录，并在T02_hesid_grouped字段中匹配。 我希望输出提供1-2m条记录。

查询大约需要4个小时...

时间的长短是由于数据集的大小引起的，还是可以进行一些优化？ 非常感谢！！

SELECT部分​​的EXPLAIN输出如下所示：

1   SIMPLE  T02_hesid_grouped   index   I_HESID I_HESID 43      79824   Using index
1   SIMPLE  hes_data_all_years  ref I_HESID I_HESID 43  hes.T02_hesid_grouped.extract_hesid 1   Using where

Answer 1

生成结果集或将其插入到目标表中可能是性能问题。

通常，对于要用于插入的结果集，不执行SELECT * ，而是以与目标表中的字段相同的顺序命名要选择的列。 您的结果集中有两列名为extract_hesid 。 看来这不是您想要的。

什么是价值hes_data_all_years.extract_hesid的行中hes_data_all_years不匹配中的行T02_hesid_grouped ？ 如果这些值不为NULL，事情将会更快。

您的表（尤其是目标表）是否使用MyISAM？ 如果这样做是因为InnoDB是面向事务的，并且必须在执行INSERT数百万行的同时生成回滚数据，那么事情将会更快。

188兆行并不小，您经过的时间也不尽人意。 这很长，但并非荒唐。 您可能要检查您的MySQL服务器是否有足够的RAM。 或者，如果这是一年一次或一次的事情，那么您可能只想简单地宣布胜利并继续前进。