python使用selenium爬取ajax网页博客内容代码
代码语言:python
所属分类:其他
代码描述:python使用selenium爬取ajax网页博客内容代码,使用find_elements_by_xpath来爬取ajax动态生成的网页内容。
代码标签: python selenium 爬取 网页 ajax 博客 内容 代码
下面为部分代码预览,完整代码请点击下载或在bfwstudio webide中打开
#!/usr/local/python3/bin/python3 # -*- coding: utf-8 -* from selenium import webdriver import io import sys sys.stdout = io.TextIOWrapper(sys.stdout.buffer,encoding='utf8') import requests import time chromeOptions = webdriver.ChromeOptions() chromeOptions.add_argument("--headless") chromeOptions.add_argument("--remote-debugging-port=9222") chromeOptions.add_argument('--no-sandbox') browser = webdriver.Chrome('/usr/bin/chromedriver',chrome_options=chromeOptions) browser.get("https://blog.bfw.wiki") #进入相关网站 #保存网站截屏图片 _single = True # 做一个死.........完整代码请登录后点击上方下载按钮下载查看
网友评论0