多线程使用处理数据库导致锁表解决办法

问题描述:

当使用ON DUPLICATE KEY UPDATE的sql来访问时,

可能会出现多个线程同时写入一个已有的数据里。
解决办法:

使用 REPLACE INTO
原因:

  1. 保持更好的并发性:REPLACE INTO 在插入记录时会先删除原有记录,然后再插入新记录。因此,在多个线程同时执行插入操作时,不会对同一行数据进行更新,从而避免了锁表和并发冲突的问题;
  2. 简化逻辑:您不需要关心冲突时是更新还是插入新记录的问题,只需要执行插入操作;
    举例 :
sql 复制代码
update_sql = "UPDATE 表名 SET 列名1 = %s WHERE 列名2 = %s"

更改为:

sql 复制代码
update_sql = "REPLACE INTO 表名 (列名1, 列名2) VALUES (%s, %s)"
相关推荐
Blossom i2 小时前
大数据预处理与采集实验一:使用Python操作MySQL数据库
数据库·mysql
雾时之林2 小时前
Linux--软件管理、源码包安装
linux·服务器·数据库
老纪的技术唠嗑局4 小时前
超级干货分享:中小企业使用 OceanBase 实践经验汇总
数据库
CLOUD ACE4 小时前
谷歌云代理|零售商Target 如何利用 Spanner Graph 提升零售发现体验并将数据库维护成本降低 50%
数据库·零售
AI大模型-小雄4 小时前
Codex写分页接口为什么越翻越慢?用Cursor Pagination解决重复与漏数据
大数据·数据库·elasticsearch·搜索引擎·chatgpt·后端开发·codex
少晓年5 小时前
从 MySQL 迁移到人大金仓 KingbaseES:完整指南与实践
数据库·mysql
SelectDB6 小时前
Apache Doris AI RAG 实战:从基础 RAG 到知识图谱增强的技术能力与选型
数据库
SelectDB6 小时前
电商企业 PostgreSQL 迁移 Apache Doris:80TB 分析数据统一平台技术能力与实践
数据库
SelectDB6 小时前
阶跃星辰 Agent 可观测:Apache Doris / SelectDB 的技术能力与实践
数据库
SelectDB6 小时前
ApacheDoris Iceberg V3 湖仓 DML:Apache Doris / SelectDB 的技术能力与实践
数据库