Java JDBC ignora setFetchSize?

Question

Sto utilizzando il seguente codice

st = connection.createStatement(
      ResultSet.CONCUR_READ_ONLY, 
      ResultSet.FETCH_FORWARD, 
      ResultSet.TYPE_FORWARD_ONLY 
      ); 
st.setFetchSize(1000); 
System.out.println("start query "); 
rs = st.executeQuery(queryString); 
System.out.println("done query"); 

La query restituire un sacco di (800k) righe e prendere un grande tempo (~ 2 m) tra la stampa "start query" e "interrogazione fatto". Quando inserisco manualmente un "limite 10000" nella mia query non c'è tempo tra "start" e "done". Elaborare i risultati richiede tempo quindi immagino che nel complesso sia più veloce se recupera solo le righe da 1k dal database, le elabora e quando sta esaurendo le righe ne può ottenere di nuove in background.

Il ResultsSet.CONCUR_READ_ONLY ecc. Dove la mia ultima ipotesi; mi sto perdendo qualcosa?

(si tratta di un server PostgreSQL 8.3)

Answer 1

Questo dipenderà dal vostro driver. Dalla documentazione:

Dà il driver JDBC un suggerimento per quanto riguarda il numero di righe che dovrebbero essere recuperati dal database quando più righe sono necessario. Il numero di righe specificato riguarda solo i set di risultati creati utilizzando questa istruzione. Se il valore specificato è zero, il suggerimento viene ignorato. Il valore predefinito è zero.

Nota che si dice "un suggerimento" - vorrei prendere che a significare che un pilota può ignorare il suggerimento, se vuole davvero ... e suona come questo è ciò che sta accadendo.

Answer 2

Provare ad accenderlo auto-commit off:

// make sure autocommit is off 
connection.setAutoCommit(false); 

st = connection.createStatement(); 
st.setFetchSize(1000); 
System.out.println("start query "); 
rs = st.executeQuery(queryString); 
System.out.println("done query"); 

Reference

Answer 3

Le due query fare cose completamente diverse.

utilizzando la clausola LIMIT limita la dimensione del set di risultati a 10000, mentre l'impostazione della dimensioni di raccolta non lo fa, dà invece un suggerimento per il conducente dire quante righe per andare a prendere in un momento in quando iterazione attraverso il set di risultati - che include tutte le 800k righe.

Quindi, quando si utilizza setFetchSize, il database crea il set completo di risultati, ecco perché ci vuole così tanto tempo.

Edit per chiarezza: Impostazione della dimensione di recupero non fa nulla a meno di eseguire iterazioni attraverso il risultato (vedi il commento di Jon), ma la creazione di un risultato molto più piccolo impostato con LIMIT fa una grande differenza.

Answer 4

ho notato che l'utilizzo delle API è diverso da quello espresso da Javadoc:

Prova a passare i parametri in questo ordine

ResultSet.TYPE_FORWARD_ONLY, 
    ResultSet.CONCUR_READ_ONLY, 
    ResultSet.FETCH_FORWARD