选择前100行后如何停止或限制选择？

Question

我有这样的查询-

SELECT c.msisdn,SUM(c.dataVolumeDownLink+c.dataVolumeUpLink) AS datasum 
FROM cdr c 
WHERE c.eveDate>='2013-10-29'
GROUP BY c.msisdn 
ORDER BY datasum DESC;

这个耗时4分钟。 我在evedate上有一个索引。

CDR表包含从'2013-10-01'到'2013-10-30'每天的2400000条记录。 但是我只选择前100条记录。 我想如何优化此查询。

我使用了limit子句，但是没有任何好处。

因此，请让我知道如何优化此查询。

谢谢。

Answer 1

你刚放

LIMIT 100

之后.... ORDER BY datasum DESC 在这里 ；

例如...。ORDER BY数据和DESC LIMIT 100；

Answer 2

如果记录平均分配，那么一天将有80k行。 超过80k的GROUP BY操作可能不会花费4分钟（我想）

我不确定您是否具有以下索引：

INDEX(eveDate, msisdn)

使用上述索引，记录将按eveDate和msisdn进行排序，从而优化GROUP BY操作。 即，相同的msisdns位于相同的块。 我猜下面的查询比您的查询快。

Q1

SELECT x.msisdn, SUM(datasum)
FROM
(
    SELECT c.msisdn AS msisdn,
        SUM(c.dataVolumeDownLink+c.dataVolumeUpLink) AS datasum 
    FROM cdr c 
    WHERE c.eveDate>='2013-10-29'
    GROUP BY eveDate, c.msisdn 
) x
GROUP BY x.msisdn
ORDER BY SUM(datasum)
LIMIT 100;

或类似的东西。

Q2

SELECT c.msisdn SUM(c.dataVolumeDownLink+c.dataVolumeUpLink) AS datasum 
FROM cdr c 
WHERE c.eveDate>='2013-10-29'
GROUP BY c.msisdn 
ORDER BY 100;

上面的查询比较简单，但是相同的msisdn可以位于另一个eveDate中。 因此，从INDEX(eveDate, msisdn)好处很小。 如果磁盘具有较大的可用空间，则执行INDEX后，将仅执行INDEX扫描。 无需数据。 全部需要在INDEX中

INDEX(eveDate, msisdn, dataVolumeDownLink, dataVolumeUpLink)

更新

hmm，如果仅添加数据，并且添加的数据永不更改。 我想知道是否每天都要制作汇总表。

CREATE TABLE summary(eveDate, msisdn, datasum, INDEX(eveDate, msisdn);

并每晚通过cronjob运行以下查询

INSERT INTO summary
SELECT NOW() c.msisdn,SUM(c.dataVolumeDownLink+c.dataVolumeUpLink) AS datasum 
FROM cdr c 
WHERE c.eveDate = NOW()
GROUP BY c.msisdn 

那么您的查询将非常简单。

SELECT msisdn, SUM(datasum) as datasum
FROM summary
WHERE eveDate BETWEEN ? AND ?

Answer 3

SELECT c.msisdn,SUM(c.dataVolumeDownLink+c.dataVolumeUpLink) AS datasum 
FROM cdr c 
WHERE c.eveDate>='2013-10-29'
GROUP BY c.msisdn 
ORDER BY datasum DESC
LIMIT 0, 100;

Answer 4

SELECT c.msisdn,SUM(c.dataVolumeDownLink+c.dataVolumeUpLink) AS datasum 
FROM 
(select * from cdr where eveDate>='2013-10-29' limit 100) as c 

GROUP BY c.msisdn 
ORDER BY datasum DESC;

与Larry的答案相去不远
不确定我是否正确理解了这个问题
首先将获取前100条记录，然后进行计算。 因此，根据group by子句，最终结果可能少于100行

编辑：
根据您的说明，您将需要在c.msisdn上添加一个索引，并在末尾添加一个limit子句
删除order by子句，并放置一个外部查询，以使记录按...排序

SELECT a.* FROM (
SELECT c.msisdn,SUM(c.dataVolumeDownLink+c.dataVolumeUpLink) AS datasum 
FROM cdr c 
WHERE c.eveDate>='2013-10-29'
GROUP BY c.msisdn limit 100) a 
ORDER BY a.datasum DESC;

在c.msisdn上添加索引