大数据量处理

删除产生大量垃圾数据

个体户的系统,更新明细时先删除明细再添加明细

看上去简单高效,但是都是逻辑删除

面对大数据量时导致系统内有很多垃圾数据

需要辨别出新增还是更新,避免垃圾数据

非增量更新,产生很多冗余操作

每次编辑就删除,只能全量更新操作,非常不安全且浪费性能。

随意要跳出变更的部分,只对少量变更操作。

没有发生变更数据,不要重复更新。

页面冗余大量数据卡顿

页面设计不到位,一个页面一次展示处理好几万的数据量,页面没模块化,数据互相耦合,最后才统一入库。

页面之间,解耦,操作完数据,立即更新入库,模块之间只有简单的交互,避免大量数据冗余。

相关推荐
万行2 小时前
SQL进阶&索引篇
开发语言·数据库·人工智能·sql
我是黄骨鱼2 小时前
【零基础学数据库|第二篇】MySql启动!!!
数据库·mysql
陌上丨2 小时前
什么是Redis的大Key和热Key?项目中一般是怎么解决的?
数据库·redis·缓存
Remember_9932 小时前
Spring 事务深度解析:实现方式、隔离级别与传播机制全攻略
java·开发语言·数据库·后端·spring·leetcode·oracle
小园子的小菜2 小时前
深入剖析HBase HFile原理:文件结构、Block协作与缓存机制
数据库·缓存·hbase
空空kkk2 小时前
SSM项目练习——hami音乐(三)
java·数据库
好奇的菜鸟2 小时前
Ubuntu 18.04 启用root账户图形界面登录指南
数据库·ubuntu·postgresql
天桥下的卖艺者2 小时前
使用R语言编写一个生成金字塔图形的函数
开发语言·数据库·r语言
Facechat2 小时前
鸿蒙开发入坑篇(九):本地数据库 (RDB) 深度解析
数据库·华为·harmonyos