怎样用Python发送HTTP请求？

在python中，发送http请求主要使用requests库。1）使用requests.get()发送get请求；2）使用requests.post()发送post请求；3）处理响应状态码；4）解析json数据；5）处理异常；6）设置请求头；7）处理认证；8）使用会话提高效率；9）设置超时时间；10）记录日志；11）设置代理。通过这些方法和最佳实践，可以高效地与api交互。

在Python中发送HTTP请求是一项常见且强大的功能，它让我们能够与互联网上的各种服务进行交互。无论你是想要从某个API获取数据，还是需要向某个服务器发送数据，Python都提供了多种方法来实现这一目标。今天，我就来详细聊聊如何用Python发送HTTP请求，以及在这一过程中需要注意的各种细节和最佳实践。

在Python中，最常用的库来发送HTTP请求是requests。这个库以其简洁和易用性著称，深受开发者的喜爱。不过，Python标准库中也提供了http.client模块，虽然它不如requests那样直观，但对于某些特定的需求，它也是一个不错的选择。

让我们先来看一个简单的例子，使用requests库发送一个GET请求：

立即学习“Python免费学习笔记（深入）”；

import requests
response = requests.get('https://api.github.com')
print(response.status_code)
print(response.text)

这个代码片段向GitHub的API发送了一个GET请求，并打印出响应的状态码和内容。requests库的美妙之处在于，它将复杂的HTTP协议细节隐藏起来，让我们可以专注于业务逻辑。

当然，HTTP请求不仅仅是GET请求，POST、PUT、DELETE等方法也是常用的。让我们看一个POST请求的例子：

import requests
data = {'key': 'value'}
response = requests.post('https://httpbin.org/post', data=data)
print(response.status_code)
print(response.json())

在这个例子中，我们向httpbin.org发送了一个POST请求，并传递了一些数据。httpbin.org是一个非常有用的测试网站，它会返回我们发送的数据，让我们可以验证请求是否成功。

在使用HTTP请求时，有几个关键点需要注意：

1. 处理响应状态码：每个HTTP请求都会返回一个状态码，200表示请求成功，404表示资源未找到，500表示服务器错误等。我们需要根据状态码来处理不同的情况。比如：

import requests
response = requests.get('https://api.github.com/invalid')
if response.status_code == 200:
print('请求成功:', response.json())
elif response.status_code == 404:
print('资源未找到')
else:
print('其他错误:', response.status_code)

2. 处理JSON数据：很多API会返回JSON格式的数据，requests库提供了方便的方法来解析JSON：

import requests
response = requests.get('https://api.github.com')
if response.status_code == 200:
data = response.json()
print('用户数量:', data['total_users'])

3. 处理异常：网络请求可能会失败，我们需要处理这些异常情况：

import requests
try:
response = requests.get('https://api.github.com', timeout=5)
response.raise_for_status()
print('请求成功:', response.json())
except requests.exceptions.RequestException as e:
print('请求失败:', e)

4. 设置请求头：有时候我们需要设置请求头，比如设置User-Agent来模拟浏览器：

import requests
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'
}
response = requests.get('https://httpbin.org/headers', headers=headers)
print(response.json())

5. 处理认证：有些API需要认证，我们可以使用requests库的认证功能：

import requests
from requests.auth import HTTPBasicAuth
response = requests.get('https://api.github.com/user', auth=HTTPBasicAuth('username', 'password'))
print(response.json())

在实际应用中，使用HTTP请求时还需要注意一些最佳实践：

• 使用会话：如果需要发送多个请求到同一个服务器，使用requests.Session()可以提高效率，因为它会保持连接状态：

import requests
with requests.Session() as session:
response1 = session.get('https://httpbin.org/cookies/set/sessioncookie/123456789')
response2 = session.get('https://httpbin.org/cookies')
print(response2.json())

• 超时设置：设置超时时间可以防止程序因为等待响应时间过长而卡死：

import requests
response = requests.get('https://api.github.com', timeout=10)
print(response.status_code)

• 日志记录：记录请求和响应日志有助于调试和监控：

import requests
import logging
logging.basicConfig(level=logging.DEBUG)
response = requests.get('https://api.github.com')

• 代理设置：在某些网络环境下，需要通过代理访问互联网：

import requests
proxies = {
'http': 'http://10.10.1.10:3128',
'https': 'http://10.10.1.10:1080',
}
response = requests.get('https://api.github.com', proxies=proxies)
print(response.status_code)

总的来说，使用Python发送HTTP请求是一个非常灵活且强大的工具。通过requests库，我们可以轻松地与各种API进行交互，获取和发送数据。在实际应用中，注意处理各种异常情况，优化请求性能，以及遵循最佳实践，可以让我们的代码更加健壮和高效。

希望这篇文章能帮助你更好地理解和使用Python发送HTTP请求。如果你在实践中遇到任何问题，欢迎随时讨论和分享经验！