Python如何处理非标准JSON

引言

JSON(JavaScript Object Notation)作为轻量级数据交换格式被广泛使用,但实际开发中常遇到不符合标准规范的JSON数据。本文将探讨如何用Python处理这些特殊情况,并提供实用解决方案。

常见非标准JSON类型

  1. 单引号包裹键值
    { 'name': '张三', 'age': 25 }

  2. 包含注释

    json 复制代码
    {
      "version": 1.1 // 版本说明
    }
  3. 尾随逗号
    { "features": ["a", "b", ] }

  4. 特殊数据类型
    { "timestamp": datetime.datetime.now() }

解决方案对比

方案 优点 缺点
手动清洗 无需额外依赖 维护成本高
json5库 支持现代语法 性能较低
demjson3 兼容性强 社区支持较弱
正则表达式 灵活高效 容易出错

推荐处理流程

python 复制代码
import json
from demjson3 import decode

def process_nonstandard_json(json_str):
    try:
        # 尝试标准解析
        return json.loads(json_str)
    except json.JSONDecodeError:
        try:
            # 使用demjson3解析
            return decode(json_str)
        except Exception as e:
            # 自定义清洗逻辑
            cleaned = json_str.replace("'", '"').replace("//", "")
            return json.loads(cleaned)

高级处理技巧

  1. 类型转换处理

    python 复制代码
    def custom_decoder(obj):
        if 'datetime' in obj:
            return datetime.fromisoformat(obj['$datetime'])
        return obj
  2. 正则表达式清洗

    python 复制代码
    import re
    pattern = re.compile(r'//.*$|/\*.*?\*/', re.DOTALL)
    cleaned = pattern.sub('', json_str)

性能优化建议

  • 批量处理时建议使用json5库
  • 预处理阶段进行字符串规范化
  • 对超大文件采用流式解析

工具推荐

  1. 在线验证工具
    JSONLint 支持非标准格式检测

  2. VSCode插件

    "JSON Tools" 提供格式化/修复功能

总结

选择方案时应遵循:

  1. 优先修正数据源
  2. 生产环境推荐demjson3
  3. 临时处理使用json5
  4. 复杂场景结合正则表达式

通过灵活运用多种工具组合,可以有效应对各类非标准JSON处理场景。

相关推荐
枷锁—sha4 分钟前
【SRC】SQL注入WAF 绕过应对策略(二)
网络·数据库·python·sql·安全·网络安全
abluckyboy19 分钟前
Java 实现求 n 的 n^n 次方的最后一位数字
java·python·算法
lly20240620 分钟前
C++ 文件和流
开发语言
m0_7066532326 分钟前
分布式系统安全通信
开发语言·c++·算法
喵手36 分钟前
Python爬虫实战:构建各地统计局数据发布板块的自动化索引爬虫(附CSV导出 + SQLite持久化存储)!
爬虫·python·爬虫实战·零基础python爬虫教学·采集数据csv导出·采集各地统计局数据发布数据·统计局数据采集
寻寻觅觅☆1 小时前
东华OJ-基础题-104-A == B ?(C++)
开发语言·c++
lightqjx1 小时前
【C++】unordered系列的封装
开发语言·c++·stl·unordered系列
天天爱吃肉82181 小时前
跟着创意天才周杰伦学新能源汽车研发测试!3年从工程师到领域专家的成长秘籍!
数据库·python·算法·分类·汽车
zh_xuan1 小时前
kotlin lazy委托异常时执行流程
开发语言·kotlin
m0_715575342 小时前
使用PyTorch构建你的第一个神经网络
jvm·数据库·python