Lettura di documenti XML di grandi dimensioni in .net

Question

Ho bisogno di leggere file xml di grandi dimensioni utilizzando file .net che possono essere facilmente diversi GB di dimensione.

Ho provato a usare XDocument, ma lancia appena un System.OutOfMemoryException quando provo a caricare il documento.

Qual è il modo più performante per leggere file XML di grandi dimensioni?

Answer 1

In pratica, è utilizzare il modello "pull" qui - XmlReader e gli amici. Ciò ti consentirà di eseguire lo streaming del documento anziché caricarlo tutto in memoria in una sola volta.

Nota che se sei al corrente di un elemento "abbastanza piccolo", puoi creare un XElement from an XmlReader, gestirlo usando il glorioso LINQ in XML e quindi passare all'elemento successivo.

Answer 2

Si potrebbe provare a utilizzare un'istanza XmlTextReader.

http://msdn.microsoft.com/en-us/library/system.xml.xmltextreader.aspx

Answer 3

la seguente pagina fa una lettura interessante, fornendo un mezzo per estrarre dati da file XML senza caricarlo in memoria. Esso consente di combinare la velocità di XmlReader con la flessibilità di Linq:

http://msdn.microsoft.com/en-us/library/bb387035.aspx

E piuttosto un interessante articolo sulla base di questa tecnica:

http://blogs.msdn.com/b/xmlteam/archive/2007/03/24/streaming-with-linq-to-xml-part-2.aspx