20
C'è un modo per mantenere l'indice nella RAM invece di tenerlo sul disco fisso?Ricerca più veloce in Lucene: esiste un modo per mantenere l'intero indice nella RAM?
Vogliamo rendere la ricerca più veloce.
A
risposta
16
C'è un modo per mantenere l'indice nella RAM invece di tenerlo sull'hard disk?
Uso della classe RAMDirectory
SampleUsage here
Anche dal Lucene FAQs
Generalmente per prestazioni di indicizzazione più veloce è meglio svuotare l'utilizzo della RAM invece del conteggio dei documenti e utilizzare un buffer RAM di grandi dimensioni il più possibile.
EDIT:RE: RamDirectory, come l'API dice RamDirectory è Un'implementazione Directory residente in memoria., si mantiene solo quelli dell'indice nella RAM come specificato dalla directory RAMDirecory
RE: Caching Nella mia conoscenza, Lucene memorizza nella cache i risultati di ricerca per mezzo di filtri pls Look @CachingWrapperFilter e QueryWrapperFilter
1
Un disco RAM potrebbe essere una soluzione per questo. Un mini-HOWTO è disponibile allo http://www.vanemery.com/Linux/Ramdisk/ramdisk.html. Montare il disco RAM come directory dell'indice e si dovrebbe fare.
+0
Si noti che per le grandi indici, sono disponibili anche dischi RAM "hardware" ... in pratica dispositivi con interfaccia hard disk, ma pieni di DRAM invece di piatti. – erickson
+0
Grazie per la risposta. Lo abbiamo considerato. Ma tendiamo a non usare questa opzione poiché non abbiamo molta esperienza nel sistema operativo. Pensiamo che ci darebbe meno controllo e meno capacità di osservare/monitorare l'indice. – elif
1
Consultare la documentazione RAMDirectory. Ecco uno basic usage example. Funzionerà solo se l'indice è abbastanza piccolo.
+0
E grazie per la risposta. Che taglia sarebbe piccola? L'indice è di circa 20 MB e non ci aspettiamo che cresca più di 5 volte. È abbastanza piccolo? – elif
+0
Prego. Un 100 MB è davvero abbastanza piccolo. Dovresti comunque considerare di utilizzare un indice del disco con le corrette impostazioni della dimensione dello stack JVM. Ciò consentirà di evitare di dover indicizzare nuovamente ogni volta che si riavvia l'applicazione e potrebbe essere veloce quanto la RAMDirectory. Vedi anche: http://www.lucidimagination.com/Community/Hear-from-the-Experts/Articles/Scaling-Lucene-and-Solr sulla velocità di ricerca. –
+0
Perché reindicizza quando riavvio l'applicazione? Pensavo di poter leggere l'indice sul disco rigido nella RAM usando RAMDirectory. Devo reindicizzare ogni volta che voglio leggere l'indice nella RAM? Grazie per il link. – elif
Problemi correlati
- 1. Quanto più veloce è un database in esecuzione nella RAM?
- 2. Ricerca per campo in Lucene
- 3. Il modo più veloce per verificare se esiste un oggetto
- 4. Come caricare un file indice di FSdirectory come una directory RAM in Lucene?
- 5. modo veloce di ottenere indice della partita nella lista
- 6. CLucene è più veloce di java lucene?
- 7. Gestione + come personaggio speciale nella ricerca Lucene
- 8. Il modo più efficiente per creare un indice in Postgres
- 9. Lucene ricerca e trattini bassi
- 10. Ricerca multipla in Lucene
- 11. Lucene: è la risposta giusta per un indice enorme?
- 12. Indice di unione in Lucene
- 13. Ricerca più veloce di file in Netbeans
- 14. Un modo per rendere md5_file() più veloce?
- 15. più veloce metodo di ricerca in StringBuilder
- 16. Il modo migliore per mantenere l'indice in tempo reale?
- 17. Memorizza il file indice Lucene nella posizione remota
- 18. Esiste un "modo più rapido" per costruire stringhe in Java?
- 19. Esiste un modo per mantenere i dati HSQLDB?
- 20. Django Haystack indice di aggiornamento più veloce
- 21. Lucene Ricerca caratteri giapponesi
- 22. Un indice partizionato globalmente migliore (più veloce) di un indice non partizionato?
- 23. Ruolo della selettività nella scansione indice/ricerca
- 24. Esiste un'implementazione TList più veloce?
- 25. un modo più veloce per scaricare più file
- 26. Il modo più veloce per verificare se un oggetto esiste in Core Data o no?
- 27. Utilizzo di Apache Lucene per la ricerca
- 28. modo più veloce per sostituire stringa in un modello
- 29. Il modo più veloce per unificare un elenco in Python
- 30. Indice Lucene con più campi della stessa natura
Grazie molto per la tua risposta dettagliata. Ho altre due domande. In primo luogo, ho letto che Lucene fa il caching, che manterrebbe l'indice parzialmente nella RAM. Ma la RAMDirectory è diversa, giusto? Mantiene tutto l'indice nella RAM? In secondo luogo, ho visto il setRAMBufferSizeMB, quello che ho capito è che era per accelerare l'indicizzazione piuttosto che cercare. Accelera anche la ricerca? – elif
oops, modificherà il mio post – Narayan
Da "ImproveSearchingSpeed": "Apri IndexReader con readOnly = true", sai come farlo in Lucene 4+? Non ho trovato nessun esempio ... – Gevorg