postgresql从入门到精通教程 - 第36讲:postgresql逻辑备份

PostgreSQL从小白到专家,是从入门逐渐能力提升的一个系列教程,内容包括对PG基础的认知、包括安装使用、包括角色权限、包括维护管理、、等内容,希望对热爱PG、学习PG的同学们有帮助,欢迎持续关注CUUG PG技术大讲堂。

第36讲:PostgreSQL逻辑备份

第36讲:12月02日(周六)19:30-20:30,往期公开课的文档及视频,联系CUUG

内容1:逻辑备份概述

内容2:pg_dump使用

内容3:pg_dumpall使用

内容4:copy使用

PG导出导入工具

PG导出导入概述

· 可以使用这些实用程序执行以下操作:

归档历史数据

保存表定义以防止用户出错

在计算机和数据库之间或PostgreSQL服务器的不同版本之间移动数据

在数据库之间传输数据

调用导出和导入程序的方法

命令行接口

其它管理工具

导出模式

· pg_dump只能备份单个数据库,不会导出角色和表空间相关的信息,而且恢复的时候需要创建空数据库。

· pg_dumpall可以备份所有数据库,并且备份角色、表空间。

-F c 备份为二进制格式, 压缩存储. 并且可被 pg_restore 用于精细还原。

-F p 备份为文本, 大库不推荐。

调用pg_dump

语法:

pg_dump [选项]... [数据库名字]

示例:

pg_dump testdb > testdb.sql

pg_dump -F c -f testdb.dmp -C -E UTF8 -h 127.0.0.1 -U postgres testdb

pg_dump -F p -f testdb.sql -C -E UTF8 -h 127.0.0.1 -U postgres testdb

逻辑恢复

· 恢复顺序

1.创建新表

2.导入数据

3.建立索引

4.触发器已导入

5.在新表上启用完整性约束

6.创建函数

· 恢复数据

文本格式备份恢复方式:

1、创建新数据库

CREATE DATABASE new_db1;

2、恢复数据

psql new_db1 < testdb.sql

二进制格式备份恢复方式:

1、创建新数据库

CREATE DATABASE new_db1;

2、恢复数据

pg_restore -d new_db1 testdb.dmp

二进制备份实现精细恢复

· 利用toc文件实现精细恢复

1、根据二进制备份文件生成 toc 文件

pg_restore -l -f testdb.toc testdb.dmp

2、修改 toc 文件,用';'号注释掉不用还原的内容

203; 1259 40996 TABLE public dept postgres

204; 1259 41001 TABLE public emp postgres

;202; 1259 16391 TABLE public t1 postgres

2840; 0 40996 TABLE DATA public dept postgres

2841; 0 41001 TABLE DATA public emp postgres

;2839; 0 16391 TABLE DATA public t1 postgres

3、以toc文件做恢复

pg_restore -F c -L testdb.toc -d testdb testdb.dmp

其它导出导入技巧

· 利用管道符实现各种导出导入

导出并且压缩

pg_dump testdb |gzip testdb.sql

解压并且导入,压缩文件不变,,导入到testdb数据库:

gunzip -c testdb.sql.gz |psql testdb

导出后直接进行恢复,文件不落地,把testdb数据库的表导入到testdb1:

pg_dump testdb| psql testdb1

并行导出与导入

pg_dump -Fd -j4 -f testdb.p.dump testdb

pg_restore -d testdb1 -j4 testdb.p.dump

其它备份恢复技巧

· 备份指定/排除的表

如果只想导出指定的表数据,可以使用-t参数,表名需要用两个双引号概括起来。

pg_dump -t ""departments"" -t ""employees"" testdb > testdb.sql

导出排除指定的表的数据库

pg_dump -d testdb -T ""emp"" > testdb_ex_emp.sql

使用pg_dump实现主机间数据库间迁移数据

· 文件不落地,实现数据库迁移

1、配置两个数据库之间的信任关系(必须)

host all all 192.168.18.0/24 trust

2、在数据库之间进行某个数据库迁移

pg_dump -h pg1 -p 1922 -U postgres testdb|psql -h pg2 -p 5432 -U postgres testdb

3、迁移所有的数据库到目标数据库

pg_dumpall -h pg1 -p 1922 -U postgres |psql -h pg2 -p 5432 -U postgres

注意:

1、PG数据库之间迁移无需配置dblink,只要指定主机名和端口即可。

2、由于用的是管道符,所以必须配置两个数据库远程登录信任关系。

3、迁移时两个数据库必须要有相同的表空间,需要提前创建。

copy概述

· 实现表与文件之间的交互

copy 命令用于数据库中表与操作系统文件(和标准输出、标准输入)之间的相互拷贝,可以由表至文件,也可以由文件至表。

使用copy实现数据库表和文本文件之间数据的迁移,非常方便,比Oracle的sqlloader易用性好。

copy语法

· 语法

文件到表

COPY table_name [ ( column ...] ) ]

FROM { 'filename' | command' | STDIN }

\[ WITH \] ( option \[, \] )

表到文件

COPY { table_name column_name [, ...] ) ] | ( query ) }

TO { 'filename' | PROGRAM 'command' | STDOUT }

\[ WITH \] ( option \[, ...\] )

应用案例

· 文件到表

文件到表时,支持的文本内容格式有两种,一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

tab键作为分隔符:

1 a

2 b

3 c

逗号作为分隔符:

1,a,"I am students"

2,b,"I am teacher"

3,c,"I am boss"

· 文件到表

文件到表时,支持的文本内容格式有两种,一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

tab键作为分隔符:

\copy tab_name from /home/postgres/tab.txt;

逗号做为分隔符:

\copy tab_name from /home/postgres/tab.csv with csv;

· 表到文件

表到文件时,支持的文本内容格式有两种,一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

tab键作为分隔符:

\copy tab_name to /home/postgres/tab.txt;

逗号做为分隔符:

\copy tab_name to /home/postgres/tab.csv with csv;

CUUG PostgreSQL技术大讲堂系列公开课,往期视频及文档,请联系CUUG客服。

相关推荐
广州智造4 小时前
OptiStruct实例:3D实体转子分析
数据库·人工智能·算法·机器学习·数学建模·3d·性能优化
技术宝哥7 小时前
Redis(2):Redis + Lua为什么可以实现原子性
数据库·redis·lua
学地理的小胖砸8 小时前
【Python 操作 MySQL 数据库】
数据库·python·mysql
dddaidai1239 小时前
Redis解析
数据库·redis·缓存
数据库幼崽9 小时前
MySQL 8.0 OCP 1Z0-908 121-130题
数据库·mysql·ocp
Amctwd9 小时前
【SQL】如何在 SQL 中统计结构化字符串的特征频率
数据库·sql
betazhou10 小时前
基于Linux环境实现Oracle goldengate远程抽取MySQL同步数据到MySQL
linux·数据库·mysql·oracle·ogg
lyrhhhhhhhh10 小时前
Spring 框架 JDBC 模板技术详解
java·数据库·spring
喝醉的小喵11 小时前
【mysql】并发 Insert 的死锁问题 第二弹
数据库·后端·mysql·死锁
付出不多12 小时前
Linux——mysql主从复制与读写分离
数据库·mysql