postgresql从入门到精通教程 - 第36讲:postgresql逻辑备份

news2024/11/19 13:35:23

PostgreSQL从小白到专家,是从入门逐渐能力提升的一个系列教程,内容包括对PG基础的认知、包括安装使用、包括角色权限、包括维护管理、、等内容,希望对热爱PG、学习PG的同学们有帮助,欢迎持续关注CUUG PG技术大讲堂。

第36讲:PostgreSQL逻辑备份

第36讲:12月02日(周六)19:30-20:30,往期公开课的文档及视频,联系CUUG

内容1:逻辑备份概述

内容2:pg_dump使用

内容3:pg_dumpall使用

内容4:copy使用

PG导出导入工具

PG导出导入概述

· 可以使用这些实用程序执行以下操作:

归档历史数据

保存表定义以防止用户出错

在计算机和数据库之间或PostgreSQL服务器的不同版本之间移动数据

在数据库之间传输数据

调用导出和导入程序的方法

命令行接口

其它管理工具

导出模式

· pg_dump只能备份单个数据库,不会导出角色和表空间相关的信息,而且恢复的时候需要创建空数据库。

· pg_dumpall可以备份所有数据库,并且备份角色、表空间。

-F c 备份为二进制格式, 压缩存储. 并且可被 pg_restore 用于精细还原。

-F p 备份为文本, 大库不推荐。

调用pg_dump

语法:

pg_dump [选项]... [数据库名字]

示例:

pg_dump testdb > testdb.sql

pg_dump -F c -f testdb.dmp -C -E UTF8 -h 127.0.0.1 -U postgres testdb

pg_dump -F p -f testdb.sql -C -E UTF8 -h 127.0.0.1 -U postgres testdb

逻辑恢复

· 恢复顺序

1.创建新表

2.导入数据

3.建立索引

4.触发器已导入

5.在新表上启用完整性约束

6.创建函数

· 恢复数据

文本格式备份恢复方式:

1、创建新数据库

CREATE DATABASE new_db1;

2、恢复数据

psql new_db1 < testdb.sql

二进制格式备份恢复方式:

1、创建新数据库

CREATE DATABASE new_db1;

2、恢复数据

pg_restore -d new_db1 testdb.dmp

二进制备份实现精细恢复

· 利用toc文件实现精细恢复

1、根据二进制备份文件生成 toc 文件

pg_restore -l -f testdb.toc testdb.dmp

2、修改 toc 文件,用‘;’号注释掉不用还原的内容

203; 1259 40996 TABLE public dept postgres

204; 1259 41001 TABLE public emp postgres

;202; 1259 16391 TABLE public t1 postgres

2840; 0 40996 TABLE DATA public dept postgres

2841; 0 41001 TABLE DATA public emp postgres

;2839; 0 16391 TABLE DATA public t1 postgres

3、以toc文件做恢复

pg_restore -F c -L testdb.toc -d testdb testdb.dmp

其它导出导入技巧

· 利用管道符实现各种导出导入

导出并且压缩

pg_dump testdb |gzip testdb.sql

解压并且导入,压缩文件不变,,导入到testdb数据库:

gunzip -c testdb.sql.gz |psql testdb

导出后直接进行恢复,文件不落地,把testdb数据库的表导入到testdb1:

pg_dump testdb| psql testdb1

并行导出与导入

pg_dump -Fd -j4 -f testdb.p.dump testdb

pg_restore -d testdb1 -j4 testdb.p.dump

其它备份恢复技巧

· 备份指定/排除的表

如果只想导出指定的表数据,可以使用-t参数,表名需要用两个双引号概括起来。

pg_dump -t ""departments"" -t ""employees"" testdb > testdb.sql

导出排除指定的表的数据库

pg_dump -d testdb -T ""emp"" > testdb_ex_emp.sql

使用pg_dump实现主机间数据库间迁移数据

· 文件不落地,实现数据库迁移

1、配置两个数据库之间的信任关系(必须)

host all all 192.168.18.0/24 trust

2、在数据库之间进行某个数据库迁移

pg_dump -h pg1 -p 1922 -U postgres testdb|psql -h pg2 -p 5432 -U postgres testdb

3、迁移所有的数据库到目标数据库

pg_dumpall -h pg1 -p 1922 -U postgres |psql -h pg2 -p 5432 -U postgres

注意:

1、PG数据库之间迁移无需配置dblink,只要指定主机名和端口即可。

2、由于用的是管道符,所以必须配置两个数据库远程登录信任关系。

3、迁移时两个数据库必须要有相同的表空间,需要提前创建。

copy概述

· 实现表与文件之间的交互

copy 命令用于数据库中表与操作系统文件(和标准输出、标准输入)之间的相互拷贝,可以由表至文件,也可以由文件至表。

使用copy实现数据库表和文本文件之间数据的迁移,非常方便,比Oracle的sqlloader易用性好。

copy语法

· 语法

文件到表

COPY table_name [ ( column ...] ) ]

FROM { 'filename' | command' | STDIN }

[ [ WITH ] ( option [, ] ) ]

表到文件

COPY { table_name column_name [, ...] ) ] | ( query ) }

TO { 'filename' | PROGRAM 'command' | STDOUT }

[ [ WITH ] ( option [, ...] ) ]

应用案例

· 文件到表

文件到表时,支持的文本内容格式有两种,一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

tab键作为分隔符:

1 a

2 b

3 c

逗号作为分隔符:

1,a,"I am students"

2,b,"I am teacher"

3,c,"I am boss"

· 文件到表

文件到表时,支持的文本内容格式有两种,一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

tab键作为分隔符:

\copy tab_name from /home/postgres/tab.txt;

逗号做为分隔符:

\copy tab_name from /home/postgres/tab.csv with csv;

· 表到文件

表到文件时,支持的文本内容格式有两种,一种是tab制表符作为分隔符(不是空格);一种是逗号做为分隔符。

tab键作为分隔符:

\copy tab_name to /home/postgres/tab.txt;

逗号做为分隔符:

\copy tab_name to /home/postgres/tab.csv with csv;

CUUG PostgreSQL技术大讲堂系列公开课,往期视频及文档,请联系CUUG客服。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1275927.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

分布式系统中最基础的 CAP 理论及其应用

对于开发或设计分布式系统的架构师、工程师来说&#xff0c;CAP 是必须要掌握的基础理论&#xff0c;CAP 理论可以帮助架构师对系统设计中目标进行取舍&#xff0c;合理地规划系统拆分的维度。下面我们先讲讲分布式系统的特点。 分布式系统的特点 随着移动互联网的快速发展&a…

vue使用皮肤框架element-plus,element-ui是vue2.0的皮肤

vue使用皮肤框架element-plus&#xff0c;element-ui是vue2.0的皮肤&#xff0c;所以现在最新的vue3要使用element-plus皮肤。使用命令行安装element-plus: npm install element-plus安装后&#xff1a; {"name": "vue01","private": true,&quo…

Java连接数据库

数据库 存储数据&#xff1a;集中管理 目的&#xff1a; 文件中的数据能够放在数据库中集中管理 管理方法&#xff1a;一个项目一个库&#xff0c;每个库中包含最小化数据的表 开发&#xff1a; 节省存储空间&#xff0c;节省运行空间&#xff0c;采用数据库&#xff0c;架…

windows判断exe应用程序是否在使用的bat脚本

脚本 REM 查询进程是否存在 tasklist|findstr /i "mysqld.exe">nul &&echo y >2.log ||echo n >2.log REM 读取文本内容赋值给变量 set /P resu<2.log if %resu% y (echo process in use ) else (echo process not in use )我们已mysqld.exe…

【算法刷题】Day10

文章目录 15. 三数之和题干&#xff1a;算法原理&#xff1a;1、排序 暴力枚举 利用set 去重2、排序 双指针 代码&#xff1a; 18. 18. 四数之和题干&#xff1a;算法原理&#xff1a;1、排序 暴力枚举 利用set 去重2、排序 双指针 代码&#xff1a; 15. 三数之和 原题链…

利用python连接MySQL数据库并执行相关sql操作

一、新建MySQL数据库 1.启动MySQL服务 打开phpstudy&#xff0c;开启MySQL服务。如果开启失败的话&#xff0c;可以打开任务管理器&#xff0c;把正在运行的mysqld服务的进程进行关闭&#xff0c;再次打开MySQL服务即可启动。 2.新建MySQL数据库 选择数据库&#xff0c;点击…

linux(3)之buildroot配置软件包

Linux(3)之buildroot配置软件包 Author&#xff1a;Onceday Date&#xff1a;2023年11月30日 漫漫长路&#xff0c;才刚刚开始… 参考文档&#xff1a; Buildroot - Making Embedded Linux Easymdev.txt docs - busybox - BusyBox: The Swiss Army Knife of Embedded Linu…

Elasticsearch分词器--空格分词器(whitespace analyzer)

介绍 文本分析&#xff0c;是将全文本转换为一系列单词的过程&#xff0c;也叫分词。analysis是通过analyzer(分词器)来实现的&#xff0c;可以使用Elasticearch内置的分词器&#xff0c;也可以自己去定制一些分词器。除了在数据写入时将词条进行转换&#xff0c;那么在查询的时…

记一次SQL Server磁盘突然满了导致数据库锁死事件is full due to ‘LOG_BACKUP‘.

背景 最近我们的sql server 数据库磁盘在80左右&#xff0c;需要新增磁盘空间。还是处以目前可控的范围内&#xff0c;但是昨天晚上告警是80%&#xff0c;凌晨2:56分告警是90%&#xff0c;今天早上磁盘就满了。 经过 通过阿里云后台查看&#xff0c;磁盘已经占据99%&#xff0c…

Spring @Cacheable缓存注解

一、简介 缓存介绍 缓存&#xff0c;在我们的日常开发中用的非常多&#xff0c;是我们应对各种性能问题支持高并发的一大利器。 Spring 从 3.1 开始就引入了缓存的支持。定义了如下两个接口来统一支持不同的缓存技术。 org.springframework.cache.Cacheorg.springframework.ca…

uniapp中解决swiper高度自适应内容高度

起因&#xff1a;uniapp中swiper组件swiper 标签存在默认高度是 height: 150px &#xff1b;高度无法实现由内容撑开&#xff0c;在默认情况下&#xff0c;swiper盒子高度显示总是 150px 解决办法思路&#xff1a; 动态设置swiper盒子的高度&#xff0c;故需要获取swiper-item盒…

展锐平台回读分区

展锐平台回读分区 1. 回读分区意义2. 操作步骤3. 回读存放的位置 1. 回读分区意义 回读的分区可用作备份&#xff0c;还可将回读到的分区与烧入机器版本的分区进行比较&#xff0c;如果两者不一致则说明烧录出现问题&#xff0c;需要重新烧录。 2. 操作步骤 打开展锐烧录工…

深度解析 Dockerfile:构建可重复、可扩展的Docker镜像

文章目录 什么是Dockerfile&#xff1f;Dockerfile的基本结构常用Dockerfile指令解析1. FROM2. LABEL3. WORKDIR4. COPY5. RUN6. EXPOSE7. ENV8. CMD 构建可重复、可扩展的Docker镜像1. 指定基础镜像的版本2. 合理使用缓存3. 精简镜像4. 使用多阶段构建 总结 &#x1f388;个人…

UDS诊断服务简单介绍

UDS简单介绍 &#xff08;1&#xff09;UDS&#xff08;Unified Diagnostic Service&#xff0c;统一诊断服务&#xff09;&#xff0c;诊断协议是ISO 15765和ISO 14229定义的一种汽车通用诊断协议&#xff0c;位于OSI模型中的应用层&#xff0c;可在不同的汽车总线&#xff0…

大势智慧荣获2023光合组织解决方案大赛人工智能赛道标杆奖及争先奖!

近日&#xff0c;2023年第三届光合组织解决方案大赛获奖名单正式公布。大势智慧以基于国产化平台的实景三维全流程解决方案&#xff0c;突破层层选拔&#xff0c;最终荣获“集智计划”&#xff08;人工智能赛道&#xff09;标杆奖及争先奖。 实景三维是我国的数字基础设施&…

零售数字化“逆熵”的6项原则和8种能力建设|ShopeX徐礼昭

作者&#xff1a;徐礼昭 来源&#xff1a;《三体零售逆熵法则》节选 旧的规则与秩序被打破&#xff0c;无序成为常态 新时代洪流裹挟冲击着传统零售 无序带来的“熵增”侵蚀企业生命 所有人都在不确定性中寻找确定 数字化如何助力企业铸就「反熵增」神器&#xff1f; 如何…

Android 滑动按钮(开关) SwitchCompat 自定义风格

原生的SwitchCompat控件如下图&#xff0c;不说不堪入目&#xff0c;也算是不敢恭维了。开个玩笑... 所以我们就需要对SwitchCompat进行自定义风格&#xff0c;效果如下图 代码如下 <androidx.appcompat.widget.SwitchCompatandroid:id"id/switch_compat"android:…

Python | 轻量ORM框架Peewee的基础使用(增删改查、自动创建模型类、事务装饰器)

文章目录 01 简介02 安装03 自动创建模型类04 基础使用4.1 查询4.2 新增4.3 更新4.4 删除 05 事务 01 简介 在使用python开发的过程中&#xff0c;有时需要一些简单的数据库操作&#xff0c;而Peewee正是理想的选择&#xff0c;它是一个小巧而灵活的 Python ORM&#xff08;对…

附录A 指令集基本原理

1. 引言 本书主要关注指令集体系结构4个主题&#xff1a; 1. 提出对指令集进行分类的方法&#xff0c;并对各种方法的优缺点进行定性评估&#xff1b; 2. 提出并分析一些在很大程度上独立于特定指令集的指令集评估数据。 3. 讨论语言与编译器议题以及…

Python+Requests模块获取响应内容

Requests模块获取响应内容 响应包括响应行、响应头、响应正文内容&#xff0c;这些返回的响应信息都可以通过Requests模块获取。这些 获取到的响应内容也是接口测试执行得到的实际结果。 获取响应行 获取响应头 获取其它响应信息 代码示例&#xff1a; # 导入requests模块…