loader命令导出大批量数据维护SQL

一、背景

工作学习中,经常遇到几千,甚至上万条的数据维护任务,如果一条一条进行数据维护SQL的编写,将是巨大的工作量。本文将分享2个小技巧,减小准备大批量数据维护SQL的工作量。

方案 1: loader 支持直接输出文本

loader 执行纯 SELECT,然后用 shell 重定向:

java 复制代码
loader \
  -type="out" \
  -db-conn-info="196.0.0.1:8002" \
  -sql="SELECT CONCAT('update table set field1=''小时'',field2=''虽然'' where field3=''', field3, ''' and field4=''', field4, ''';') FROM table1 WHERE field3='12345';" \
  -user="admin" \
  -password="123456" \
  > /data/path/file.sql 2>log/table1.log &

MySQL 中字符串用两个单引号 '' 转义,而不是反斜杠。

方案 2:当 loader 直接连 MySQL用 INTO OUTFILE

java 复制代码
SELECT CONCAT('update `table` set field1=\'小时\',field2=\'虽然\' where field3=\'', field3, '\' and field4=\'', field4, '\';')
FROM table1
WHERE field3 = '12345'
INTO OUTFILE '/data/export/file.sql'
FIELDS TERMINATED BY ''
LINES TERMINATED BY '\n';
相关推荐
计算机毕设VX:Fegn08953 小时前
计算机毕业设计|基于springboot + vue医院设备管理系统(源码+数据库+文档)
数据库·vue.js·spring boot·后端·课程设计
Mr__Miss3 小时前
保持redis和数据库一致性(双写一致性)
数据库·redis·spring
Knight_AL4 小时前
Spring 事务传播行为 + 事务失效原因 + 传播行为为什么不用其他模式
数据库·sql·spring
倔强的石头_4 小时前
时序数据时代的“存储与分析困局”解析及金仓解决方案
数据库
计算机毕设VX:Fegn08954 小时前
计算机毕业设计|基于springboot + vue小型房屋租赁系统(源码+数据库+文档)
数据库·vue.js·spring boot·后端·课程设计
倔强的石头_5 小时前
场景化落地指南——金仓时序数据库在关键行业的应用实践
数据库
SelectDB5 小时前
驾驭 CPU 与编译器:Apache Doris 实现极致性能的底层逻辑
运维·数据库·apache
zbguolei6 小时前
MySQL根据身份证号码计算出生日期和年龄
数据库·mysql
马克学长6 小时前
SSM校园图书借阅服务系统jd2z8(程序+源码+数据库+调试部署+开发环境)带论文文档1万字以上,文末可获取,系统界面在最后面
数据库·图书管理系统·ssm 框架·ssm 校园图书借阅系统
软件派6 小时前
高斯数据库使用心得——从性能优化到行业实践的深度解析
数据库·oracle