话不多说,先上代码和效果图。
# Author:wangdq
# Date :2021/10/31 12:07
# Describe :
from selenium import webdriver
chrome_options = webdriver.ChromeOptions()
chrome_options.headless = True
chrome = webdriver.Chrome(chrome_options=chrome_options)
chrome.ge
print(chrome.page_source)
效果图:
从上面的图片可以看出,获取到的chrom对象,他的page_source属性里面就是我们爬取的页面代码。
webdriver环境搭建
1、首先需要装chrome(谷歌浏览器)
2、下载对应的chromedriver,需要看你的谷歌浏览器的版本是那个。我的版本是95.0.4638.54
chromdriver下载链接
我使用的是windows,所以直接下载32位的压缩包。
下载后,将压缩包解压后获得chromedriver.exe文件,将它放到到python的安装目录下,我的是
C:\Users\admin\AppData\Local\Programs\Python\Python38-32
3、下载selenium
Python中安装selenium或者直接cmd中安装:
pip install -U selenium
4、最后一步就是测试了,参考文章开头的代码。