python使用selenium爬取ajax网页博客内容代码

代码语言:python

所属分类:其他

代码描述:python使用selenium爬取ajax网页博客内容代码,使用find_elements_by_xpath来爬取ajax动态生成的网页内容。

代码标签: python selenium 爬取 网页 ajax 博客 内容 代码

下面为部分代码预览,完整代码请点击下载或在bfwstudio webide中打开

#!/usr/local/python3/bin/python3
# -*- coding: utf-8 -*
from selenium import webdriver
import io  
import sys  
sys.stdout = io.TextIOWrapper(sys.stdout.buffer,encoding='utf8') 

import requests
import time

chromeOptions = webdriver.ChromeOptions()
chromeOptions.add_argument("--headless")
chromeOptions.add_argument("--remote-debugging-port=9222")
chromeOptions.add_argument('--no-sandbox')
browser = webdriver.Chrome('/usr/bin/chromedriver',chrome_options=chromeOptions)

browser.get("https://blog.bfw.wiki")               #进入相关网站
#保存网站截屏图片   
_single = True
# 做一个死.........完整代码请登录后点击上方下载按钮下载查看

网友评论0