Python 请求标头

在进行网络请求时，请求标头（Request Headers）是由客户端向服务器发送的HTTP消息的一部分，用于提供更多的关于请求的信息。Python作为一种高级编程语言，自然也提供了许多强大的库来处理HTTP请求，其中就包括设置请求标头。

requests库

requests是Python中一个广泛使用的HTTP库，它支持发送HTTP请求、处理响应并自动管理HTTP连接池。在requests中设置请求标头很容易，只需要在requests.get() 或 requests.post() 方法调用时传递一个字典作为headers参数即可。

示例代码如下：

import requests

url = 'https://www.example.com/'

headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.36'
}

response = requests.get(url, headers=headers)

print(response.content)

以上的代码中，我们使用了Mozilla Firefox浏览器的User-Agent标头。运行这个程序，我们会得到HTTP响应的Content。

urllib库

Python标准库中的urllib也支持设置请求标头。不过，在urllib中，为了设置请求标头，我们需要创建一个Request对象，并在Request对象的头部中设置标头。

示例代码如下：

from urllib.request import Request, urlopen

url = 'https://www.example.com/'

headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.36'
}

req = Request(url, headers=headers)
response = urlopen(req)
html = response.read()

print(html)

以上代码中，我们使用了Mozilla Firefox浏览器的User-Agent标头。运行这个程序，我们会得到HTTP响应的Content。

总结

以上介绍了在Python中如何通过requests和urllib设置请求标头。这样，我们就可以方便地模拟各种不同的客户端环境，并且使用更大的自由度进行爬虫开发。