Python：httpx 库高级用法举例和应用详解

Travis Tang

2024-07-25

Python：httpx库高级用法举例和应用详解

模块介绍

httpx 是一个为 Python 设计的新一代 HTTP 库，提供了同步和异步的 HTTP 客户端功能。它在请求的灵活性、性能及易用性方面都做了很好的平衡，支持 HTTP/2 和连接池等功能。适用于 Python 3.6 及以上版本，是目前流行的 HTTP 客户端库之一。

应用场景

httpx 能够广泛应用于需要进行网络请求的各种场合，尤其适用于：

Web 爬虫：可以轻松发送请求并提取网页数据。
API 交互：与 RESTful API 或 GraphQL 接口进行高效通信。
异步应用：使得在高并发场景中保持请求效率尤为重要。
数据抓取与表单提交：支持制作强大的自动化脚本，向网站发送数据。

安装说明

httpx 不是 Python 的默认模块，需要单独安装。使用以下命令进行安装：

1	pip install httpx # 安装httpx库

用法举例

1. 同步请求获取网页内容

import httpx  # 导入httpx库

# 发送GET请求，获取指定URL内容
response = httpx.get('https://httpbin.org/get')  # 发起请求
print(response.status_code)  # 打印响应状态码
print(response.json())  # 打印响应的JSON内容

在这个示例中，我们使用 httpx 进行一个基本的同步 GET 请求，获取网页内容并输出状态码和响应体。

2. 异步请求获取 API 数据

import httpx  # 导入httpx库
import asyncio  # 导入异步库

async def fetch_data(url):  # 定义异步函数，用于获取数据
    async with httpx.AsyncClient() as client:  # 创建异步HTTP客户端
        response = await client.get(url)  # 发送GET请求
        return response.json()  # 返回响应的JSON内容

# 执行异步任务
url = 'https://httpbin.org/get'
data = asyncio.run(fetch_data(url))  # 运行异步函数并获取数据
print(data)  # 打印获取到的JSON数据

这里展示了如何使用 httpx 的异步功能。我们创建了一个异步函数通过传入 URL 进行 GET 请求，并在最后打印出获取到的数据。

3. POST 请求提交表单数据

import httpx  # 导入httpx库

# 表单数据
data = {
    'username': 'example',  # 用户名
    'password': 'password123'  # 密码
}

# 发送POST请求，提交表单数据
response = httpx.post('https://httpbin.org/post', data=data)  # 发起POST请求
print(response.status_code)  # 打印响应状态码
print(response.json())  # 打印响应的JSON内容

在这个示例中，我们使用 POST 请求提交表单数据。在实际应用中，例如登录或信息提交，这样的用法十分常见。

通过以上例子，我们可以看到 httpx 的灵活性和强大功能，无论是简单的 GET 请求、复杂的异步操作，还是数据的提交，它都能简单高效地满足需求。

如果你对 Python、尤其是标准库的使用感兴趣，那我强烈建议你关注我的博客（全糖冲击博客）。我的博客中包含了丰富的 Python 标准库使用教程，便于你方便地查询和学习。通过这些教程，你将能够快速掌握 Python 编程的技巧和知识，不论是在日常开发中，还是在大型项目的运用中，这些都是极为有用的资源。让我们一起加深对 Python 的理解，欢迎你来浏览和交流，也期待你能成为我们博客的一份子！