更改用户代理 Selenium - Python

在使用 Selenium 进行爬取时，有时需要更改用户代理来模拟浏览器，以避免被网站识别为机器人并被封禁。本文将介绍如何在 Python 中使用 Selenium 更改用户代理。

安装所需模块

在使用 Selenium 进行爬取时，需要安装 Selenium 和相应的浏览器驱动。同时，为了更改用户代理，还需要安装 fake-useragent 模块。

# 安装 Selenium 和浏览器驱动
pip install selenium
pip install chromedriver

# 安装 fake-useragent 模块
pip install fake-useragent

更改用户代理

在使用 Selenium 进行浏览器操作时，可以通过设置 options 来更改用户代理。以下是使用 Chrome 浏览器更改用户代理的示例代码：

from selenium import webdriver
from selenium.webdriver.chrome.options import Options
from fake_useragent import UserAgent

# 创建 UserAgent 实例
user_agent = UserAgent()

# 创建 ChromeOptions 对象
options = Options()

# 设置用户代理
options.add_argument('--user-agent={}'.format(user_agent.random))

# 创建 Chrome 浏览器对象
driver = webdriver.Chrome(options=options)

# 访问网页
driver.get('https://www.baidu.com/')

在以上代码中，首先创建了一个 UserAgent 实例，用于生成随机的用户代理。然后创建了 ChromeOptions 对象，将随机生成的用户代理设置为参数传入。最后通过 ChromeOptions 对象创建了 Chrome 浏览器对象，并访问了百度首页。

总结

通过以上示例代码，我们可以轻松地在 Python 中使用 Selenium 更改用户代理，从而模拟浏览器进行爬取。同时，使用 fake-useragent 模块可以帮助我们生成随机的用户代理，增加爬虫的匿名性。