学习requests库是掌握Python中网络请求编程的基础，它简化了HTTP操作，支持GET、POST、PUT、DELETE等请求类型。通过理解其安装、主要功能与特点，您能轻松执行复杂网络交互，并通过实例深入探索实际应用，掌握错误处理与重试机制，为复杂项目提供强大的网络请求支持。

网络请求是编程中一项基本技能，它允许程序与远程服务器进行通信，获取或发送数据。在Python中，requests 模块是一个非常流行且功能强大的库，它简化了HTTP请求的编写。通过学习requests，您将能够轻松地执行复杂的HTTP操作，如GET、POST、PUT、DELETE等，同时处理HTTP状态码和错误情况。本教程将从安装requests库开始，逐步引导您掌握其基本用法，并通过实际案例深入理解其应用。

安装与环境配置

安装requests模块非常简单，只需在命令行中运行以下命令：

pip install requests

确保你的Python环境已经安装，可以使用以下命令检查Python版本：

python --version

确保你使用的是Python3版本，因为requests库依赖于Python3的某些特性。

requests 的主要功能与特点

requests 模块提供了以下主要功能：

• HTTP/1.1 相关请求：GET、POST、PUT、DELETE等。
• 自动适配代理服务器：支持执行请求时的代理服务器配置。
• 自动处理Cookies：在请求和响应之间自动管理Cookies。
• HTTP头部管理：方便地添加、修改或删除请求和响应头。
• 响应对象：包含HTTP状态码、内容、编码等信息，便于错误处理和数据处理。
• 支持异步请求：通过aiohttp等库，实现非阻塞网络请求。

发送 GET 请求

使用 requests.get() 发送GET请求，并获取网页内容。

import requests

response = requests.get('https://www.example.com')
print(response.status_code)
print(response.text)

发送 POST 请求

发送POST请求时，可以通过params或data参数传递数据。

import requests

data = {'key': 'value'}
response = requests.post('https://example.com/login', data=data)
print(response.status_code)
print(response.json())

处理 HTTP 响应与状态码

检查响应状态码以确保请求成功或失败，通常状态码200表示请求成功。

import requests

response = requests.get('https://www.example.com')
if response.status_code == 200:
    print("Request successful")
else:
    print(f"Request failed with status code: {response.status_code}")

发送请求时的参数设置

向请求中添加额外参数，如URL中的查询字符串或额外的头部信息。

headers = {'User-Agent': 'MyApp/1.0'}
response = requests.get('https://www.example.com', headers=headers)

使用 json() 和 data/params 加载不同格式的数据

将JSON数据作为请求的一部分传递。

import requests

data = {"name": "John Doe", "email": "[email protected]"}
response = requests.post('https://example.com/api/register', json=data)
print(response.status_code)

常见的网络请求错误类型

网络请求可能会遇到各种错误，如连接失败、超时、服务器错误等。

import requests

try:
    response = requests.get('https://www.example.com')
    response.raise_for_status()  # 如果响应状态码不是200，就触发HTTPError异常
except requests.exceptions.HTTPError as errh:
    print("HTTP Error:", errh)
except requests.exceptions.ConnectionError as errc:
    print("Error Connecting:", errc)
except requests.exceptions.Timeout as errt:
    print("Timeout Error:", errt)
except requests.exceptions.RequestException as err:
    print("Something went wrong", err)

实现错误处理和重试逻辑

自定义重试逻辑，当遇到特定错误时重试请求。

import requests
from time import sleep

def retry_request(url, retries=5, delay=3):
    for i in range(retries):
        try:
            response = requests.get(url)
            response.raise_for_status()
            return response
        except requests.exceptions.RequestException as e:
            print(f"Request failed: {e}. Retrying in {delay} seconds...")
            sleep(delay)
    print("Max retries exceeded")
    return None

response = retry_request('https://www.example.com', retries=3, delay=5)

简单的网页抓取

使用 requests 模块轻松抓取网页信息。

import requests
from bs4 import BeautifulSoup

url = 'https://www.example.com'
response = requests.get(url)

if response.status_code == 200:
    soup = BeautifulSoup(response.text, 'html.parser')
    titles = soup.find_all('h1')
    for title in titles:
        print(title.text)
else:
    print("Failed to retrieve page")

基于 requests 的 API 请求案例

获取并解析API响应数据。

import requests

api_url = 'https://api.example.com/data'
response = requests.get(api_url)

if response.status_code == 200:
    data = response.json()
    for item in data:
        print(item['name'], item['value'])
else:
    print("API request failed")

requests 模块是Python中处理HTTP请求的首选库，它简化了网络操作，提供了丰富的功能和易于使用的API。通过本教程，您应该对如何使用requests发送请求、处理响应、错误处理以及实现重试逻辑有了更深入的理解。

为了进一步提升您的网络编程技能，您可以探索以下资源：

• 慕课网：提供丰富的Python教程和实战项目，帮助您实践所学知识。
• 官方文档：requests库的官方文档详细介绍了所有功能和用法，是学习的最佳资源。
• 在线问答平台：Stack Overflow和GitHub Issues等社区，可以找到关于requests的常见问题和解决方案。

始终记住，实践是学习编程的最好方式，不断尝试使用requests库完成各种网络请求，逐步提升您的技能水平。