网络请求轻松搞定:玩转Python中requests函数的实用技巧

介绍

在Python中,requests库是用于发送HTTP请求的常用库。它提供了简洁易用的接口,使得发送HTTP请求变得非常简单。本文将深入探讨requests库的使用方法,从入门到精通。

目录

  1. 安装requests库
  2. 发送GET请求
  3. 发送带参数的GET请求
  4. 发送POST请求
  5. 发送带参数的POST请求
  6. 发送JSON数据
  7. 发送文件
  8. 设置请求头
  9. 设置超时时间
  10. 处理响应
  11. 异常处理
  12. 会话管理
  13. SSL证书验证
  14. 代理设置
  15. 总结

1. 安装requests库

在使用requests库之前,我们需要先安装它。可以使用以下命令来安装requests库:

python 复制代码
pip install requests

2. 发送GET请求

requests库中的get()函数可以用于发送GET请求。

python 复制代码
import requests

# 发送GET请求
response = requests.get('https://api.example.com/data')

# 输出响应内容
print(response.text)

在上述代码中,我们使用requests.get()函数发送GET请求到https://api.example.com/data,并将响应保存在变量response中。然后,使用response.text打印响应内容。

3. 发送带参数的GET请求

有时候我们需要发送带参数的GET请求。

python 复制代码
import requests

# 发送带参数的GET请求
params = {'key': 'value'}
response = requests.get('https://api.example.com/data', params=params)

# 输出响应内容
print(response.text)

在上述代码中,我们使用params参数传递参数,发送带参数的GET请求到https://api.example.com/data,并将响应保存在变量response中。

4. 发送POST请求

requests库中的post()函数可以用于发送POST请求。

python 复制代码
import requests

# 发送POST请求
data = {'key': 'value'}
response = requests.post('https://api.example.com/data', data=data)

# 输出响应内容
print(response.text)

在上述代码中,我们使用requests.post()函数发送POST请求到https://api.example.com/data,并将响应保存在变量response中。

5. 发送带参数的POST请求

有时候我们需要发送带参数的POST请求。

python 复制代码
import requests

# 发送带参数的POST请求
data = {'key1': 'value1', 'key2': 'value2'}
response = requests.post('https://api.example.com/data', data=data)

# 输出响应内容
print(response.text)

在上述代码中,我们使用data参数传递参数,发送带参数的POST请求到https://api.example.com/data,并将响应保存在变量response中。

6. 发送JSON数据

requests库中的post()函数也可以用于发送JSON数据。

python 复制代码
import requests

# 发送JSON数据
json_data = {'key': 'value'}
response = requests.post('https://api.example.com/data', json=json_data)

# 输出响应内容
print(response.text)

在上述代码中,我们使用json参数传递JSON数据,发送POST请求到https://api.example.com/data,并将响应保存在变量response中。

7. 发送文件

requests库中的post()函数还可以用于发送文件。

python 复制代码
import requests

# 发送文件
files = {'file': open('data.txt', 'rb')}
response = requests.post('https://api.example.com/upload', files=files)

# 输出响应内容
print(response.text)

在上述代码中,我们使用files参数传递文件,发送POST请求到https://api.example.com/upload,并将响应保存在变量response中。

8. 设置请求头

有时候我们需要设置请求头,以便向服务器传递更多信息。

python 复制代码
import requests

# 设置请求头
headers = {'User-Agent': 'Mozilla/5.0'}
response = requests.get('https://api.example.com/data', headers=headers)

# 输出响应内容
print(response.text)

在上述代码中,我们使用headers参数设置请求头,发送GET请求到https://api.example.com/data,并将响应保存在变量response中。

9. 设置超时时间

在发送请求时,有时候我们需要设置超时时间,防止请求时间过长。

python 复制代码
import requests

# 设置超时时间为5秒
timeout = 5
response = requests.get('https://api.example.com/data', timeout=timeout)

# 输出响应内容
print(response.text)

在上述代码中,我们使用timeout参数设置超时时间为5秒,发送GET请求到https://api.example.com/data,并将响应保存在变量response中。

10. 处理响应

requests库返回的响应是一个Response对象,我们可以通过该对象获取响应的各种信息。

python 复制代码
import requests

# 发送GET请求
response = requests.get('https://api.example.com/data')

# 获取响应状态码
status_code = response.status_code

# 获取响应头
headers = response.headers

# 获取响应内容
content = response.text

# 输出响应状态码、响应头和响应内容
print("状态码:", status_code)
print("响应头:", headers)
print("响应内容:", content)

在上述代码中,我们使用response.status_code获取响应状态码,使用response.headers获取响应头,使用response.text获取响应内容,并将这些信息输出。

11. 异常处理

在发送请求时,可能会发生一些异常,我们需要进行适当的异常处理。

python 复制代码
import requests

try:
    # 发送GET请求
    response = requests.get('https://api.example.com/data')

    # 如果响应状态码不为200,抛出异常
    response.raise_for_status()

    # 输出响应内容
    print(response.text)
except requests.exceptions.HTTPError as http_error:
    print("HTTP错误:", http_error)
except requests.exceptions.ConnectionError as connection_error:
    print("连接错误:", connection_error)
except requests.exceptions.Timeout as timeout_error:
    print("超时错误:", timeout_error)
except requests.exceptions.RequestException as request_exception:
    print("其他错误:", request_exception)

在上述代码中,我们使用try...except语句进行异常处理。如果响应状态码不为200,则使用response.raise_for_status()抛出HTTPError异常。除了HTTPError异常,requests库还可能抛出ConnectionError、Timeout和RequestException等异常。

12. 会话管理

有时候我们需要在多个请求之间保持一些状态信息,可以使用Session对象进行会话管理。

python 复制代码
import requests

# 创建会话
session = requests.Session()

# 第一个请求
response1 = session.get('https://api.example.com/login')

# 第二个请求
response2 = session.post('https://api.example.com/data', data={'key': 'value'})

# 输出响应内容
print(response2.text)

在上述代码中,我们使用requests.Session()创建一个会话对象session。在session对象中,第一个请求和第二个请求可以共享会话信息,例如登录信息等。

13. SSL证书验证

在发送HTTPS请求时,默认会验证服务器的SSL证书。如果不想验证,可以设置verify参数为False。

python 复制代码
import requests

# 发送HTTPS请求,不验证SSL证书
response = requests.get('https://api.example.com/data', verify=False)

# 输出响应内容
print(response.text)

在上述代码中,我们使用verify=False设置不验证SSL证书,发送HTTPS请求到https://api.example.com/data。

14. 代理设置

有时候我们需要通过代理服务器发送请求,可以通过proxies参数进行设置。

python 复制代码
import requests

# 设置代理
proxies = {'http': 'http://user:password@proxy.example.com',
           'https': 'https://user:password@proxy.example.com'}
response = requests.get('https://api.example.com/data', proxies=proxies)

# 输出响应内容
print(response.text)

在上述代码中,我们使用proxies参数设置代理,发送请求到https://api.example.com/data。

15. 总结

通过本文的讲解,我们了解了requests库的基本用法,从发送GET请求、发送带参数的GET请求,到发送POST请求、发送带参数的POST请求,再到发送JSON数据和文件,以及设置请求头、超时时间,处理响应和异常,会话管理,SSL证书验证和代理设置。

requests库是发送HTTP请求的重要工具,熟练掌握它的使用将帮助我们在Python开发中更加灵活、高效地与网络进行交互。

相关推荐
Code成立几秒前
《Java核心技术I》Swing的网格包布局
java·开发语言·swing
Auc245 分钟前
使用scrapy框架爬取微博热搜榜
开发语言·python
QQ同步助手12 分钟前
C++ 指针进阶:动态内存与复杂应用
开发语言·c++
凯子坚持 c18 分钟前
仓颉编程语言深入教程:基础概念和数据类型
开发语言·华为
小爬虫程序猿20 分钟前
利用Java爬虫速卖通按关键字搜索AliExpress商品
java·开发语言·爬虫
梦想画家22 分钟前
Python Polars快速入门指南:LazyFrames
python·数据分析·polars
程序猿-瑞瑞22 分钟前
24 go语言(golang) - gorm框架安装及使用案例详解
开发语言·后端·golang·gorm
qq_4335545423 分钟前
C++ 面向对象编程:递增重载
开发语言·c++·算法
易码智能31 分钟前
【EtherCATBasics】- KRTS C++示例精讲(2)
开发语言·c++·kithara·windows 实时套件·krts
一只自律的鸡32 分钟前
C语言项目 天天酷跑(上篇)
c语言·开发语言