cosa devo usare al posto di urlopen in urllib3

Question

Volevo scrivere un codice come prima ... in questo modo:

from bs4 import BeautifulSoup 
import urllib2 

url = 'http://www.thefamouspeople.com/singers.php' 
html = urllib2.urlopen(url) 
soup = BeautifulSoup(html) 

ma ho trovato devo installare urllib3 ora.

Ma coudntfind qualsiasi tutorial o esempio per capire come riscrivere il codice precedente, ad esempio, urllib3 non ha urlopen.

Qualsiasi spiegazione o esempio, per favore ?!

Sto usando python 3.4.

Answer 1

Non è necessario installare urllib3. È possibile scegliere qualsiasi libreria di richiesta HTTP che soddisfi le proprie esigenze e fornire la risposta a BeautifulSoup. La scelta è però di solito requests a causa del ricco set di funzioni e dell'API conveniente. È possibile installare requests immettendo pip install requests nella riga di comando. Ecco un esempio di base:

from bs4 import BeautifulSoup 
import requests 

url = "url" 
response = requests.get(url) 

soup = BeautifulSoup(response.content, "html.parser") 

Answer 2

urllib3 è una libreria diversa da urllib e urllib2. Ha molte funzioni aggiuntive per le urllibs nella libreria standard, se ne hai bisogno, cose come ri-usare le connessioni. La documentazione è qui: https://urllib3.readthedocs.org/

Se si desidera utilizzare urllib3, è necessario pip install urllib3. Un esempio di base si presenta così:

from bs4 import BeautifulSoup 
import urllib3 

http = urllib3.PoolManager() 

url = 'http://www.thefamouspeople.com/singers.php' 
response = http.request('GET', url) 
soup = BeautifulSoup(response.data) 

Answer 3

Il nuovo urllib3 biblioteca ha una bella documentazione here
Al fine di ottenere il risultato desiderato si shuld segue che:

Import urllib3 
from bs4 import BeautifulSoup 

url = 'http://www.thefamouspeople.com/singers.php' 

http = urllib3.PoolManager() 
response = http.request('GET', url) 
soup = BeautifulSoup(response.data.decode('utf-8')) 

Il "decodificare utf -8 "parte è facoltativa. Ha funzionato senza di esso quando ho provato, ma ho postato l'opzione comunque.
Fonte: User Guide