WebClient è il modo migliore per scaricare i dati http?

Question

Problema: devo scaricare centinaia di immagini da diversi host. Ogni host ha ovunque tra 20 e centinaia di immagini.

Soluzione: utilizzo di new WebClient ogni volta che è necessario scaricare un'immagine tramite il metodo del client WebClient.

O sarebbe meglio mantenere un pool di connessioni socket aperte e effettuare la richiesta http utilizzando chiamate di livello inferiore?

È costoso aprire/chiudere una connessione TCP (presumo che sia ciò che fa WebClient), quindi l'utilizzo di un pool sembra più efficiente?

Answer 1

Credo che l'infrastruttura sottostante utilizzata da WebClient possa già condividere le connessioni HTTP, quindi non è necessario. Si consiglia di verificare utilizzando qualcosa come Wireshark, ovviamente, con alcuni URL di esempio.

Fondamentalmente, mi piacerebbe prendere lo stesso approccio a questa come con altre attività di programmazione - scrivere il codice nel modo più semplice che funziona, e quindi verificare se si comporta abbastanza bene per le vostre esigenze. Se lo fa, hai finito. In caso contrario, utilizzare gli strumenti appropriati (analizzatori di rete, ecc.) Per risolvere perché lo non sta funzionando abbastanza bene e utilizzare un codice più complicato solo se risolve il problema.

La mia esperienza è che WebClient va bene se non è quello che ti serve, ma non ti dà un controllo altrettanto preciso come WebRequest. Se non si dispone dicontrollo, andare con WebClient.

Answer 2

Io uso HttpWebRequest e HttpWebResponse per racimolare tutto ciò che voglio. A meno che, naturalmente, non ci siano servizi disponibili per il requisito, ma anche se, a volte, esistono limitazioni (limitazioni aziendali) e spesso preferisco scavare l'html dalla pura richiesta http. A volte ti senti più simile a uno sviluppatore, lo sai ...