postgresql从入门到精通 - 第36讲：postgresql逻辑备份

admin

PostgreSQL从小白到专家，是从入门逐渐能力提升的一个系列教程，内容包括对PG基础的认知、包括安装使用、包括角色权限、包括维护管理、、等内容，希望对热爱PG、学习PG的同学们有帮助，欢迎持续关注CUUG PG技术大讲堂。

第36讲：PostgreSQL逻辑备份

第36讲：12月02日(周六)19:30-20:30，往期公开课的文档及视频，联系CUUG

内容1：逻辑备份概述

内容2：pg_dump使用

内容3：pg_dumpall使用

内容4：copy使用

PG导出导入工具

PG导出导入概述

· 可以使用这些实用程序执行以下操作：

归档历史数据

保存表定义以防止用户出错

在计算机和数据库之间或PostgreSQL服务器的不同版本之间移动数据

在数据库之间传输数据

调用导出和导入程序的方法

命令行接口

其它管理工具

导出模式

· pg_dump只能备份单个数据库，不会导出角色和表空间相关的信息，而且恢复的时候需要创建空数据库。

· pg_dumpall可以备份所有数据库，并且备份角色、表空间。

                -F c 备份为二进制格式, 压缩存储. 并且可被 pg_restore 用于精细还原。

                -F p 备份为文本, 大库不推荐。

调用pg_dump

语法：

pg_dump [选项]... [数据库名字]

示例：

pg_dump testdb > testdb.sql

pg_dump -F c -f testdb.dmp -C -E UTF8 -h 127.0.0.1 -U postgres testdb

pg_dump -F p -f testdb.sql -C -E UTF8 -h 127.0.0.1 -U postgres testdb

逻辑恢复

· 恢复顺序

                1.创建新表

                2.导入数据

                3.建立索引

                4.触发器已导入

                5.在新表上启用完整性约束

                6.创建函数

· 恢复数据

        文本格式备份恢复方式：

                1、创建新数据库

                CREATE DATABASE new_db1;

                2、恢复数据

                psql new_db1 < testdb.sql

        二进制格式备份恢复方式：

                1、创建新数据库

                CREATE DATABASE new_db1;

                2、恢复数据

                pg_restore -d new_db1 testdb.dmp

二进制备份实现精细恢复

· 利用toc文件实现精细恢复

        1、根据二进制备份文件生成 toc 文件

                pg_restore -l -f testdb.toc testdb.dmp

        2、修改 toc 文件，用‘;’号注释掉不用还原的内容

                203; 1259 40996 TABLE public dept postgres

                204; 1259 41001 TABLE public emp postgres

                ;202; 1259 16391 TABLE public t1 postgres

                2840; 0 40996 TABLE DATA public dept postgres

                2841; 0 41001 TABLE DATA public emp postgres

                ;2839; 0 16391 TABLE DATA public t1 postgres

        3、以toc文件做恢复

                pg_restore -F c -L testdb.toc -d testdb testdb.dmp

其它导出导入技巧

· 利用管道符实现各种导出导入

                导出并且压缩

                pg_dump testdb |gzip testdb.sql

                解压并且导入，压缩文件不变，，导入到testdb数据库：

                gunzip -c testdb.sql.gz |psql testdb

                导出后直接进行恢复，文件不落地，把testdb数据库的表导入到testdb1：

                pg_dump testdb| psql testdb1

                并行导出与导入

                pg_dump -Fd -j4 -f testdb.p.dump testdb

                pg_restore -d testdb1 -j4 testdb.p.dump

其它备份恢复技巧

· 备份指定/排除的表

                如果只想导出指定的表数据，可以使用-t参数，表名需要用两个双引号概括起来。

                pg_dump -t ""departments"" -t ""employees"" testdb > testdb.sql

                导出排除指定的表的数据库

                pg_dump -d testdb -T ""emp"" > testdb_ex_emp.sql

使用pg_dump实现主机间数据库间迁移数据

· 文件不落地，实现数据库迁移

                1、配置两个数据库之间的信任关系(必须)

                host all all 192.168.18.0/24 trust

                2、在数据库之间进行某个数据库迁移

                pg_dump -h pg1 -p 1922 -U postgres testdb|psql -h pg2 -p 5432 -U postgres testdb

                3、迁移所有的数据库到目标数据库

                pg_dumpall -h pg1 -p 1922 -U postgres |psql -h pg2 -p 5432 -U postgres

                注意：

                1、PG数据库之间迁移无需配置dblink，只要指定主机名和端口即可。

                2、由于用的是管道符，所以必须配置两个数据库远程登录信任关系。

                3、迁移时两个数据库必须要有相同的表空间，需要提前创建。

copy概述

· 实现表与文件之间的交互

        copy 命令用于数据库中表与操作系统文件(和标准输出、标准输入)之间的相互拷贝，可以由表至文件，也可以由文件至表。

        使用copy实现数据库表和文本文件之间数据的迁移，非常方便，比Oracle的sqlloader易用性好。

copy语法

· 语法

        文件到表

                COPY table_name [ ( column ...] ) ]

                FROM { 'filename' | command' | STDIN }

                [ [ WITH ] ( option [, ] ) ]

        表到文件

                COPY { table_name column_name [, ...] ) ] | ( query ) }

                TO { 'filename' | PROGRAM 'command' | STDOUT }

                [ [ WITH ] ( option [, ...] ) ]

应用案例

· 文件到表

        文件到表时，支持的文本内容格式有两种，一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

        tab键作为分隔符：

                1 a

                2 b

                3 c

        逗号作为分隔符：

                1,a,"I am students"

                2,b,"I am teacher"

                3,c,"I am boss"

· 文件到表

        文件到表时，支持的文本内容格式有两种，一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

        tab键作为分隔符：

                \copy tab_name from /home/postgres/tab.txt;

        逗号做为分隔符：

                \copy tab_name from /home/postgres/tab.csv with csv;

· 表到文件

        表到文件时，支持的文本内容格式有两种，一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

        tab键作为分隔符：

                \copy tab_name to /home/postgres/tab.txt;

        逗号做为分隔符：

                \copy tab_name to /home/postgres/tab.csv with csv;

CUUG PostgreSQL技术大讲堂系列公开课，往期视频及文档，请联系CUUG客服。