即使使用索引，连接两个表 MySQL 也很慢

Question

我有两个表：

第一个table1是动态创建的（当用户从​​ Web 服务器提交数据时），通常是大约 50K 行。 第二个表是一个查找表table2 ，有大约 10Mil 行。

我正在尝试将两个表连接到四列，如下所示：

SELECT t.id FROM table1 t 
JOIN table2 m
ON (t.name = m.name AND t.pos = m.pos AND t.ref = m.ref AND t.alt = m.alt);

我在table2对列name (VARCHAR)、 pos (INT)、 ref (CHAR) 和alt (CHAR) 进行了索引，但查询仍然需要很长时间才能完成。

关于这里可能出现什么问题的任何指示？

谢谢

---

EXPLAIN输出：

id  select_type table   partitions  type    possible_keys   key key_len ref rows    filtered    Extra
1   SIMPLE  t1  NULL    ALL NULL    NULL    NULL    NULL    49329   100.00  Using where
1   SIMPLE  t2  NULL    ref table2_name,table2_pos,table2_ref,table2_alt    table2_name 32  my_db.t1.NAME   2488    0.00    Using index condition; Using where

Answer 1

在name, pos, ref, alt上创建复合索引

喜欢

INDEX theIndex (name,pos,ref, alt)

此外，4 个单一索引会有所帮助 - 请参阅http://dev.mysql.com/doc/refman/5.7/en/index-merge-optimization.html - 但不如复合索引那么多。

Answer 2

在这里尝试两件事：

1. 第一个是最简单的——更改 join 子句的顺序以将 varchar 列移到末尾。

SELECT t.id FROM table1 t JOIN table2 m ON (t.pos = m.pos AND t.ref = m.ref AND t.alt = m.alt AND t.name = m.name);

2. 这需要做更多的工作，但添加一个新的计算列，该列基于 4 列生成数字哈希。 删除 pos、ref、alt 和 name 上的索引，并向哈希列添加新索引。 然后在您的连接子句中包含哈希列。

SELECT t.id FROM table1 t JOIN table2 m ON (t.hash = m.hash AND t.pos = m.pos AND t.ref = m.ref AND t.alt = m.alt AND t.name = m.姓名）;

编辑：不查看您的数据库和查询执行计划，很难解决这个问题，但我的猜测是 MySQL 很难加入 VARCHAR 列。 你能用结果更新你的问题吗

EXPLAIN SELECT t.id FROM table1 t JOIN table2 m ON (t.name = m.name AND t.pos = m.pos AND t.ref = m.ref AND t.alt = m.alt)

Answer 3

任何表的索引：

SELECT 
  CONCAT(
    'ALTER TABLE ', 
    TABLE_NAME, 
    ' ', 
    'ADD ', 
    IF(
      NON_UNIQUE = 1, 
      CASE UPPER(INDEX_TYPE) WHEN 'FULLTEXT' THEN 'FULLTEXT INDEX' WHEN 'SPATIAL' THEN 'SPATIAL INDEX' ELSE CONCAT(
        'INDEX ', INDEX_NAME, ' USING ', INDEX_TYPE
      ) END, 
      IF(
        UPPER(INDEX_NAME) = 'PRIMARY', 
        CONCAT(
          'PRIMARY KEY USING ', INDEX_TYPE
        ), 
        CONCAT(
          'UNIQUE INDEX ', INDEX_NAME, ' USING ', 
          INDEX_TYPE
        )
      )
    ), 
    '(', 
    GROUP_CONCAT(
      DISTINCT CONCAT('', COLUMN_NAME, '') 
      ORDER BY 
        SEQ_IN_INDEX ASC SEPARATOR ', '
    ), 
    ');'
  ) AS 'Show_Add_Indexes' 
FROM 
  information_schema.STATISTICS 
WHERE 
  TABLE_SCHEMA = 'your_database' 
  and TABLE_NAME = 'your_table';
-- GROUP BY 
--   TABLE_NAME, 
--   INDEX_NAME 
-- ORDER BY 
--   TABLE_NAME ASC, 
--   INDEX_NAME ASC;