Ottieni pagina generata con Javascript in Python

Question

Vorrei scaricare la pagina Web generata da Javascript e memorizzarla nella variabile stringa nel codice Python. La pagina viene generata quando si fa clic sul pulsante.

Se vorrei conoscere l'URL risultante, userei urllib2 ma questo non è il caso.

ringraziamento

Answer 1

Si potrebbe utilizzare Selenium Webdriver:

#!/usr/bin/env python 
from contextlib import closing 
from selenium.webdriver import Firefox # pip install selenium 
from selenium.webdriver.support.ui import WebDriverWait 

# use firefox to get page with javascript generated content 
with closing(Firefox()) as browser: 
    browser.get(url) 
    button = browser.find_element_by_name('button') 
    button.click() 
    # wait for the page to load 
    WebDriverWait(browser, timeout=10).until(
     lambda x: x.find_element_by_id('someId_that_must_be_on_new_page')) 
    # store it to string variable 
    page_source = browser.page_source 
print(page_source)