python分布式爬虫-Selenium（针对需要渲染的页面）

pip install Selenium -i http://pypi.douban.com/simple --trusted-host pypi.douban.com

from selenium import webdriver

browser = webdriver.Chrome()
browser = webdriver.Firefox()

# -*- coding:UTF-8 -*-
from selenium import webdriver

if __name__ == '__main__':
    target = 'http://www.baidu.com'
    browser = webdriver.Chrome()
    browser.get(target)  # 打开浏览器预设网址
    print(browser.page_source)  # 打印网页源代码
    browser.close()  # 关闭浏览器

a = browser.find_element_by_xpath('//*[@>).text
    print(a)

# -*- coding:UTF-8 -*-
from selenium import webdriver

if __name__ == '__main__':
    target = 'http://www.zjzwfw.gov.cn/zjservice/front/index/page.do?webId=83'
    browser = webdriver.Chrome()
    browser.get(target)  # 打开浏览器预设网址
    browser.implicitly_wait(3) # 等待3秒
    a = browser.find_element_by_xpath('//*[@>).text
    print(a)
    browser.close()  # 关闭浏览器