10
Sto cercando di ottenere la pagina HTML di ritorno da l'invio di una richiesta POST:utilizzando python urllib2 per inviare richiesta POST e ottenere la risposta
import httplib
import urllib
import urllib2
from BeautifulSoup import BeautifulSoup
headers = {
'Host': 'digitalvita.pitt.edu',
'Connection': 'keep-alive',
'Content-Length': '325',
'Origin': 'https://digitalvita.pitt.edu',
'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_7_4) AppleWebKit/537.1 (KHTML, like Gecko) Chrome/21.0.1180.89 Safari/537.1',
'Content-type': 'application/x-www-form-urlencoded; charset=UTF-8',
'Accept': 'text/javascript, text/html, application/xml, text/xml, */*',
'Referer': 'https://digitalvita.pitt.edu/index.php',
'Accept-Encoding': 'gzip,deflate,sdch',
'Accept-Language': 'en-US,en;q=0.8',
'Accept-Charset': 'ISO-8859-1,utf-8;q=0.7,*;q=0.3',
'Cookie': 'PHPSESSID=lvetilatpgs9okgrntk1nvn595'
}
data = {
'action': 'search',
'xdata': '<search id="1"><context type="all" /><results><ordering>familyName</ordering><pagesize>100000</pagesize><page>1</page></results><terms><name>d</name><school>All</school></terms></search>',
'request': 'search'
}
data = urllib.urlencode(data)
print data
req = urllib2.Request('https://digitalvita.pitt.edu/dispatcher.php', data, headers)
response = urllib2.urlopen(req)
the_page = response.read()
soup=BeautifulSoup(the_page)
print soup
Qualcuno può dirmi come farlo funzionare?
Avete controllato la libreria [richieste] (http://docs.python-requests.org/en/latest/index.html)? Rende le richieste HTTP molto più semplici. Inoltre, mancano alcuni ritorni a capo, ad es. tra le istruzioni di importazione e prima delle istruzioni 'print'. Sono anche presenti nel tuo codice originale? – Maus
sarebbe utile vedere il messaggio di errore – Will
L'utilizzo di pycurl è molto più semplice e più pulito: http://stackoverflow.com/questions/22799648/convert-curl-example-to-pycurl – johannzhaojohann