python HTTP请求同时返回为JSON的异常处理

近期某个同事要定期统计当前某个设备的运行状态的情况,按照正常逻辑进行编写了程序,调试验证后可正常使用,但是遇到一个问题:

在调用第三方的接口时,返回504超时导致JSON解析失败的情况,即出现了非JSON响应,故计划增加超时重试、响应格式验证 来规避此问题。

一、封装完整HTTP请求异常处理函数
1、确定函数封装的主要功能

支持常用的GET和POST、超时控制、自动重试

捕获异常分类,解决异常类导入的问题(非JSON返回文案提示,超时记录并重试,错误状态码提示、请求异常重试)

校验HTTP状态码(通过raise_for_status(),2XX为成功,否则跑出HTTPError)
2、封装函数的实现

python 复制代码
import time,requests
from requests.exceptions import (RequestException,Timeout,HTTPError)
#兼容原生json解析错误
from json.decoder import  JSONDecodeError as JsonLibJSONDecodeError

def http_request(url:str,method:str = "POST",params: dict = None,data: dict = None,headers: dict = None,timeout :int = 10,max_retries : int =3,retry_delay: float = 2)->dict:
    params = params or {}
    data  =data or {}
    headers =headers or {}

    for retry in range(max_retries):
        try:
        	#程序主体部分
            if method.upper() == "GET":
                response = requests.get(
                    url=url,
                    data=params,
                    headers=headers,
                    timeout=timeout
                )
            elif method.upper() == "POST":
                response = requests.post(
                    url=url,
                    data=params,
                    json=data,  
                    headers=headers,
                    timeout=timeout
                )
            else:
                return {
                    "success": False,
                    "data": None,
                    "message": f"不支持的请求方法:{method}"
                }

            # 校验HTTP状态码(2xx为成功,否则抛出HTTPError)
            response.raise_for_status()

            # 尝试解析JSON响应
            try:
                response_data = response.json()
            except JsonLibJSONDecodeError:
                # 若响应为空或非JSON,返回原始文本(可选)
                response_data = response.text
                return {
                    "success": True,
                    "data": response_data,
                    "message": "响应非JSON格式,返回原始文本",
                    "response": response
                }

            # 请求成功,返回结果
            return {
                "success": True,
                "data": response_data,
                "message": "请求成功",
                "response": response
            }
        except Timeout:
            #超时异常,记录日志并重试
            error_msg = f"⚠️请求超时,第{retry+1}/{max_retries}次重试"
            print(f"【ERROR】{error_msg}")
            if retry < max_retries:
                time.sleep(retry_delay)
            else:
                return {"success":False,"data":None,"message":f"请求超时,已重试{max_retries}次:{url}"}
        except HTTPError as e:
            #HTTP状态错误(如504、403。。。)
            error_msg = f"HTTP错误:{e.response.status_code}--{e.response.text}"
            print(f"【ERROR】{error_msg}")
            return {"success":False,"data":None,"message": error_msg,"response":e.response}

        except RequestException as e:
            # 其他请求异常(连接失败、DNS解析错误等)
            error_msg = f"请求异常:{str(e)}"
            print(f"[ERROR] {error_msg}")
            if retry < max_retries:
                time.sleep(retry_delay)
            else:
                return {
                    "success": False,
                    "data": None,
                    "message": f"请求失败,已重试{max_retries}次:{error_msg}"
                }

    return {
        "success": False,
        "data": None,
        "message": f"请求失败,超出最大重试次数{max_retries}"
    }```


二、编写demo,进行封装函数的验证
```python
def demo(environment):
    """
    功能:验证异常处理程序是否可用
    :return:
    """
    timeline_start_time = deal_time.get_LondonTime(BJ_start_time)
    timeline_end_time = deal_time.get_LondonTime(BJ_end_time)
    query = {
    #此处填写调用接口的参数
    }
    datas = json.dumps(query)
    headers = {
        "X-AUTH-SOURCE": "SSO",
        "Cookie": deal_token.get_token(environment),
        "Content-Type": "application/json; charset=UTF-8",
        'Connection': 'close'
    }#请根据实际情况进行修改
    if environment == "test":
        select_url = "对应的url"
    if environment == "online":
        select_url = "对应的url"
    response = http_request(url=select_url, method="POST", params =datas, headers=headers, timeout=10,max_retries =3,retry_delay =2)

    if response["data"]["code"] !=0:
    	#针对token经常过期进行兜底
        deal_token.update_token(environment)#该函数根据实际情况进行实现
        headers = {
            "X-AUTH-SOURCE": "SSO",
            "Cookie": deal_token.get_token(environment),
            "Content-Type": "application/json; charset=UTF-8",
            'Connection': 'close'
        }
        response = http_request(url=select_url, method="POST", params =datas, headers=headers, timeout=10,max_retries =3,retry_delay =2)
    data = response["data"]["data"]
    return data 

1、验证方式一:通过写错误的url验证HTTP状态码

验证返回结果如下:

2、验证方式二:通过缩短超时时间,验证超时

3、验证方式三:正常请求

通过执行demo,未发生异常时,运行正常。

相关推荐
RFID固定资产管理系统17 分钟前
公司RFID管理系统揭秘
大数据·python
IVEN_21 分钟前
Python官方包、Conda、uv,应该怎么选
python
凡尘——雨落凡尘1 小时前
Python列表索引越界IndexError问题深度解析与解决办法
python·indexerror·list index out of range
Metaphor6921 小时前
使用 Python 在 Word 文档中添加或删除文本框
python·word
郝同学今天有进步吗2 小时前
构建 LangGraph Code Review Agent(七):实现规则匹配、Finding Guardrails 与 Markdown 报告
python·ai·fastapi·code review
xuhe22 小时前
一劳永逸!解决 AutoDL 系统盘(30GB)爆满与 pip 缓存迁移
linux·python·ai·jupyter
CodexDave3 小时前
Python 自动化接单实战(一):把 CSV 需求做成配置驱动解析器
java·python·自动化·json·数据清洗·python自动化·csv处理
m沐沐3 小时前
【深度学习】循环神经网络RNN——结构、原理与长期依赖问题解析
人工智能·pytorch·python·rnn·深度学习·算法·机器学习
风吹心凉4 小时前
python3基础2026.7.28
开发语言·python
减瓦4 小时前
告别Postman——用VSCode优雅地发起Http请求
vscode·http·postman