QUERY speed with limit e milion records

Question

Hi ho una tabella db records 7milion per testare la velocità di query.

Ho testato i miei 2 domande che sono la stessa query con diversi parametri limite:

interrogazione 1 -

SELECT * 
FROM  table 
LIMIT  20, 50; 

interrogazione 2 -

SELECT * 
FROM  table 
LIMIT  6000000, 6000030; 

tempi di query exec sono:

1. query 1 - 0.006 sec
2. interrogazione 2-5,500 sec

In entrambe queste domande, io sono il recupero stesso numero di record, ma nel secondo caso sta prendendo più tempo. Qualcuno può spiegare le ragioni alla base di questo?

Answer 1

Senza guardarlo troppo da vicino, il mio presupposto è che ciò si verifica perché la prima query deve solo leggere sul 50 ° record per restituire i risultati, mentre la seconda query deve leggere sei milioni prima di restituire i risultati. Fondamentalmente, la prima query è subito più veloce.

Parto dal presupposto che questo ha una quantità incredibile a che fare con la composizione del tavolo - tipi di campo e chiavi, ecc

Se un record è composto da campi a lunghezza fissa (ad esempio CHAR VARCHAR vs.), quindi il DBMS può solo calcolare dove inizia l'ennesimo record e salta lì. Se la sua lunghezza variabile, allora si dovrebbe leggere i record per determinare dove inizia l'ennesimo record. Allo stesso modo, assumerei ulteriormente che le tabelle che hanno chiavi primarie appropriate sarebbero più veloci da interrogare rispetto a quelle senza tali chiavi.

Answer 2

Penso che il rallentamento sia legato al fatto che si stanno usando limiti con offset e si sta interrogando la tabella senza alcun contesto aggiuntivo per l'indicizzazione. È possibile che il primo sia solo più veloce perché può raggiungere l'offset più rapidamente.

Answer 3

È la differenza tra il ritorno di 50 righe e 6000030 righe (o ~ 1 milione di righe da quando hai detto che c'erano solo 7 milioni di righe).

Con due argomenti, il primo argomento specifica l'offset della prima fila tornare, e il secondo specifica il numero massimo di righe per tornare. Lo scostamento della riga iniziale è 0 (non 1):

SELECT * FROM tbl LIMIT 5,10; # Recuperare le righe 6-15

http://dev.mysql.com/doc/refman/5.0/en/select.html

Inoltre, penso che siete alla ricerca di 30 pagine di fila in modo che le domande dovrebbero utilizzare 30 come secondo parametro nella clausola limite.

SELECT * 
FROM  table 
LIMIT  20, 30; 

SELECT * 
FROM  table 
LIMIT  6000000, 30;