网络请求轻松搞定:玩转Python中requests函数的实用技巧

介绍

在Python中,requests库是用于发送HTTP请求的常用库。它提供了简洁易用的接口,使得发送HTTP请求变得非常简单。本文将深入探讨requests库的使用方法,从入门到精通。

目录

  1. 安装requests库
  2. 发送GET请求
  3. 发送带参数的GET请求
  4. 发送POST请求
  5. 发送带参数的POST请求
  6. 发送JSON数据
  7. 发送文件
  8. 设置请求头
  9. 设置超时时间
  10. 处理响应
  11. 异常处理
  12. 会话管理
  13. SSL证书验证
  14. 代理设置
  15. 总结

1. 安装requests库

在使用requests库之前,我们需要先安装它。可以使用以下命令来安装requests库:

python 复制代码
pip install requests

2. 发送GET请求

requests库中的get()函数可以用于发送GET请求。

python 复制代码
import requests

# 发送GET请求
response = requests.get('https://api.example.com/data')

# 输出响应内容
print(response.text)

在上述代码中,我们使用requests.get()函数发送GET请求到https://api.example.com/data,并将响应保存在变量response中。然后,使用response.text打印响应内容。

3. 发送带参数的GET请求

有时候我们需要发送带参数的GET请求。

python 复制代码
import requests

# 发送带参数的GET请求
params = {'key': 'value'}
response = requests.get('https://api.example.com/data', params=params)

# 输出响应内容
print(response.text)

在上述代码中,我们使用params参数传递参数,发送带参数的GET请求到https://api.example.com/data,并将响应保存在变量response中。

4. 发送POST请求

requests库中的post()函数可以用于发送POST请求。

python 复制代码
import requests

# 发送POST请求
data = {'key': 'value'}
response = requests.post('https://api.example.com/data', data=data)

# 输出响应内容
print(response.text)

在上述代码中,我们使用requests.post()函数发送POST请求到https://api.example.com/data,并将响应保存在变量response中。

5. 发送带参数的POST请求

有时候我们需要发送带参数的POST请求。

python 复制代码
import requests

# 发送带参数的POST请求
data = {'key1': 'value1', 'key2': 'value2'}
response = requests.post('https://api.example.com/data', data=data)

# 输出响应内容
print(response.text)

在上述代码中,我们使用data参数传递参数,发送带参数的POST请求到https://api.example.com/data,并将响应保存在变量response中。

6. 发送JSON数据

requests库中的post()函数也可以用于发送JSON数据。

python 复制代码
import requests

# 发送JSON数据
json_data = {'key': 'value'}
response = requests.post('https://api.example.com/data', json=json_data)

# 输出响应内容
print(response.text)

在上述代码中,我们使用json参数传递JSON数据,发送POST请求到https://api.example.com/data,并将响应保存在变量response中。

7. 发送文件

requests库中的post()函数还可以用于发送文件。

python 复制代码
import requests

# 发送文件
files = {'file': open('data.txt', 'rb')}
response = requests.post('https://api.example.com/upload', files=files)

# 输出响应内容
print(response.text)

在上述代码中,我们使用files参数传递文件,发送POST请求到https://api.example.com/upload,并将响应保存在变量response中。

8. 设置请求头

有时候我们需要设置请求头,以便向服务器传递更多信息。

python 复制代码
import requests

# 设置请求头
headers = {'User-Agent': 'Mozilla/5.0'}
response = requests.get('https://api.example.com/data', headers=headers)

# 输出响应内容
print(response.text)

在上述代码中,我们使用headers参数设置请求头,发送GET请求到https://api.example.com/data,并将响应保存在变量response中。

9. 设置超时时间

在发送请求时,有时候我们需要设置超时时间,防止请求时间过长。

python 复制代码
import requests

# 设置超时时间为5秒
timeout = 5
response = requests.get('https://api.example.com/data', timeout=timeout)

# 输出响应内容
print(response.text)

在上述代码中,我们使用timeout参数设置超时时间为5秒,发送GET请求到https://api.example.com/data,并将响应保存在变量response中。

10. 处理响应

requests库返回的响应是一个Response对象,我们可以通过该对象获取响应的各种信息。

python 复制代码
import requests

# 发送GET请求
response = requests.get('https://api.example.com/data')

# 获取响应状态码
status_code = response.status_code

# 获取响应头
headers = response.headers

# 获取响应内容
content = response.text

# 输出响应状态码、响应头和响应内容
print("状态码:", status_code)
print("响应头:", headers)
print("响应内容:", content)

在上述代码中,我们使用response.status_code获取响应状态码,使用response.headers获取响应头,使用response.text获取响应内容,并将这些信息输出。

11. 异常处理

在发送请求时,可能会发生一些异常,我们需要进行适当的异常处理。

python 复制代码
import requests

try:
    # 发送GET请求
    response = requests.get('https://api.example.com/data')

    # 如果响应状态码不为200,抛出异常
    response.raise_for_status()

    # 输出响应内容
    print(response.text)
except requests.exceptions.HTTPError as http_error:
    print("HTTP错误:", http_error)
except requests.exceptions.ConnectionError as connection_error:
    print("连接错误:", connection_error)
except requests.exceptions.Timeout as timeout_error:
    print("超时错误:", timeout_error)
except requests.exceptions.RequestException as request_exception:
    print("其他错误:", request_exception)

在上述代码中,我们使用try...except语句进行异常处理。如果响应状态码不为200,则使用response.raise_for_status()抛出HTTPError异常。除了HTTPError异常,requests库还可能抛出ConnectionError、Timeout和RequestException等异常。

12. 会话管理

有时候我们需要在多个请求之间保持一些状态信息,可以使用Session对象进行会话管理。

python 复制代码
import requests

# 创建会话
session = requests.Session()

# 第一个请求
response1 = session.get('https://api.example.com/login')

# 第二个请求
response2 = session.post('https://api.example.com/data', data={'key': 'value'})

# 输出响应内容
print(response2.text)

在上述代码中,我们使用requests.Session()创建一个会话对象session。在session对象中,第一个请求和第二个请求可以共享会话信息,例如登录信息等。

13. SSL证书验证

在发送HTTPS请求时,默认会验证服务器的SSL证书。如果不想验证,可以设置verify参数为False。

python 复制代码
import requests

# 发送HTTPS请求,不验证SSL证书
response = requests.get('https://api.example.com/data', verify=False)

# 输出响应内容
print(response.text)

在上述代码中,我们使用verify=False设置不验证SSL证书,发送HTTPS请求到https://api.example.com/data。

14. 代理设置

有时候我们需要通过代理服务器发送请求,可以通过proxies参数进行设置。

python 复制代码
import requests

# 设置代理
proxies = {'http': 'http://user:password@proxy.example.com',
           'https': 'https://user:password@proxy.example.com'}
response = requests.get('https://api.example.com/data', proxies=proxies)

# 输出响应内容
print(response.text)

在上述代码中,我们使用proxies参数设置代理,发送请求到https://api.example.com/data。

15. 总结

通过本文的讲解,我们了解了requests库的基本用法,从发送GET请求、发送带参数的GET请求,到发送POST请求、发送带参数的POST请求,再到发送JSON数据和文件,以及设置请求头、超时时间,处理响应和异常,会话管理,SSL证书验证和代理设置。

requests库是发送HTTP请求的重要工具,熟练掌握它的使用将帮助我们在Python开发中更加灵活、高效地与网络进行交互。

相关推荐
小红的布丁3 分钟前
Reactor 模型详解:单 Reactor、主从 Reactor 与 Netty 思想
android·java·开发语言
Smile_2542204186 分钟前
DCS如何通过KepServerEx向InfluxDB写数据
网络·时序数据库
.select.8 分钟前
TCP 5(socket编程)
服务器·网络·tcp/ip
风曦Kisaki9 分钟前
Linux服务Day03:自定义YUM仓库、网络YUM仓库(HTTP/FTP)、MariaDB数据库基础操作
linux·网络·数据库
被摘下的星星11 分钟前
Java的类加载
java·开发语言
skilllite作者14 分钟前
SkillLite 多入口架构实战:CLI / Python SDK / MCP / Desktop / Swarm 一页理清
开发语言·人工智能·python·安全·架构·rust·agentskills
秋月的私语20 分钟前
遥感影像拼接线优化工具:基于Qt+GDAL+OpenCV的从零到一实践
开发语言·qt·opencv
xwz小王子28 分钟前
智元发布 GO-2:动作空间推理 + 全生命周期闭环,让机器人稳定可靠落地
开发语言·golang·机器人
charlie11451419128 分钟前
通用GUI编程技术——图形渲染实战(二十八)——图像格式与编解码:PNG/JPEG全掌握
开发语言·c++·windows·学习·图形渲染·win32
ZC跨境爬虫29 分钟前
批量爬取小说章节并优化排版(附完整可运行脚本)
前端·爬虫·python·自动化