Python爬虫从入门到精通:（23）Selenium扩展知识小技巧_Python涛哥

如何让selenium规避检测

有的网站会检测请求是否为selenium发起，如果是的话则让该次请求失败

规避检测的方法:

• selenium接管chrome浏览器

实现步骤:

1. 必须将你电脑中安装的谷歌浏览器的驱动所在的目录找到，且将目录添加到环境变量中
2. 打开cmd，在命令行中输入命令：

chrome.exe --remote-debugging-port=9222 --user-data-dir="一个空文件夹的目录"

指定执行结束后，会打开你本机安装好的谷歌浏览器

1. 执行如下代码：可以使用下属代码接管步骤2打开的真实浏览器

from selenium import webdriver
from selenium.webdriver.chrome.options import Options

chrome_options = Options()
chrome_options.add_experimental_option('debuggerAddress', "1270.0.01:9222")

# 本机安装好的谷歌驱动程序路径
chrome_driver = "C:\Program File(x86)\Google\Chrome\Application\chromedriver.exe"
driver = webdriver.Chrome(executable_path=chrome_driver, chrome_options=chrome_options)
print(driver.title)

无头浏览器（无可视化界面的浏览器)

# 创建一个参数对象，用来控制chrome以无界面模式打开
chrome_options = Options()
chrome_options.add_argument('--headless')
chrome_options.add_argument('--disable-gpu')

# 创建浏览器对象
bro = webdriver.Chrome(executable_path=chrome_driver, chrome_options=chrome_options)

这样，运行后就不会有浏览器出现了