Ubuntu挂载HDD迁移存储PostgreSQL数据

news2025/4/16 17:29:34

关联博客:windows通用网线连接ubuntu实现ssh登录、桌面控制、文件共享

背景:

在个人ubuntu机器上安装了pgsql,新建了一张表插入了2000w+数据用于模拟大批量数据分页查询用,但是发现查询也不慢(在公司测试环境查询1700w+总数需要16s左右),由于当前pgsql数据默认安装在SSD中,怀疑由于SSD的读取速度较高,体现不出查询慢,于是计划挂载一张机械硬盘,将pg数据迁移至机械盘,验证查询是否会变慢

请添加图片描述

实践:

1、挂载HDD

1-1、ubuntu界面操作

准备一张空闲的HDD硬盘,连接至ubuntu(本文使用一张1T的希捷HDD)
请添加图片描述

格式化,卷名设置为HDD
请添加图片描述
设置完后为未挂载状态
请添加图片描述

由于在界面上挂载,默认会将HDD挂载到/media目录下,所以下面执行指令

1-2、查看未挂载的磁盘,从大到小排序

可以看第一个为我们需要挂载的磁盘,LABELHDDUUID7639aea6-7668-4bc3-ae22-b48c96377e8f

lsblk -o NAME,SIZE,FSTYPE,MOUNTPOINT,LABEL,UUID | grep -v " /" | sort -hrk2
sda         931.5G ext4                                         HDD      7639aea6-7668-4bc3-ae22-b48c96377e8f
nvme0n1     931.5G                                                       
└─nvme0n1p3 609.2G ntfs                                         material 6CB69233B691FDB0
 

1-2、创建挂载点目录

sudo mkdir -p /mnt/pgdata

1-3、执行挂载

此文演示基于LABEL进行挂载,-L后面 填写标签
临时挂载测试

sudo mount -L HDD /mnt/pgdata

检查挂载状态

df -h /mnt/pgdata
文件系统        大小  已用  可用 已用% 挂载点
/dev/sda        916G   28K  870G    1% /mnt/pgdata

设置永久挂载(编辑/etc/fstab)

sudo nano /etc/fstab
## 添加配置
LABEL=HDD /mnt/pgdata ext4 defaults,nofail 0 2

验证fstab配置

# 没有错误消息,表示配置正确
sudo mount -a

设置权限

sudo chown -R postgres:postgres /mnt/pgdata
sudo chmod 700 /mnt/pgdata

2、迁移PG数据

2-1、停止pg服务

sudo systemctl stop postgresql

2-2、迁移存量数据

查看当前pgsql的数据目录

grep data_directory /etc/postgresql/*/main/postgresql.conf
data_directory = '/var/lib/postgresql/15/main'          # use data in another directory

移动数据至刚才挂载的目录【需要等待一定时间,具体看需要转移多少存量数据】

sudo mv /var/lib/postgresql/15/main /mnt/pgdata

2-3、修改配置&确认修改

修改postgresql.conf

sudo nano /etc/postgresql/15/main/postgresql.conf
data_directory = '/mnt/pgdata/main'          # use data in another directory

重启pgsql

sudo systemctl start postgresql

检查数据目录是否修改

sudo systemctl status postgresql
sudo -u postgres psql
postgres=# SHOW data_directory;
  data_directory  
------------------
 /mnt/pgdata/main
(1 row)

3、问题汇总

3-1、执行迁移指令后,HDD磁盘容量没有变化

执行sudo mv /var/lib/postgresql/15/main /mnt/pgdata前,请确认需要HDD挂载的目录是否为/mnt/pgdata,博主先前设置HDD挂载目录为/mnt/pgdata,但是迁移时执行sudo mv /var/lib/postgresql/15/main /mnt/pg_data,多了下划线,导致实际没有迁移成功。

3-2、登录pgsql提示:连接到套接字"/var/run/postgresql/.s.PGSQL.5432"上的服务器失败:没有那个文件或目录

关注postgresql.conf配置中的data_directory与当前pgsql的实际数据目录地址是否一致。博主执行sudo mv /var/lib/postgresql/15/main /mnt/pgdata指令后,pg数据实际上迁移至了/mnt/pgdata/main中,一开始postgresql.conf设置data_directory/mnt/pgdata,出现了这个问题,调整成/mnt/pgdata/main后解决

验证:

在挂载HDD和pg数据迁移过后,再次执行

SELECT COUNT(*) FROM t_common_work_order_log;

首次查询很慢,约20分钟,用SSD的话首次查询约为16s
请添加图片描述
但是后续查询就比较快了,插入了新数据后再次查询也很快,甚至先前比用SSD还快😳
在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2329014.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Flink CDC Pipeline mysql to doris

版本兼容 flink 与 flink-cdc版本兼容 flink 与doris版本兼容 运行同步程序 最终在 flink-1.20.1 与 flink-cdc-3.1.1 跑通测试 配置yaml文件 [rootchb1 flink-cdc-3.1.1]# cat mysql2doris.yaml ##################################################################…

Git 教程:从 0 到 1 全面指南 教程【全文三万字保姆级详细讲解】

目录 什么是 Git ? Git 与 SVN 区别 Git 安装配置 Linux 平台上安装 Centos/RedHat 源码安装 Windows 平台上安装 使用 winget 工具 Mac 平台上安装 Git 配置 用户信息 文本编辑器 差异分析工具 查看配置信息 生成 SSH 密钥(可选&#xf…

【 <二> 丹方改良:Spring 时代的 JavaWeb】之 Spring Boot 的未来:从微服务到云原生的演进

<前文回顾> 点击此处查看 合集 https://blog.csdn.net/foyodesigner/category_12907601.html?fromshareblogcolumn&sharetypeblogcolumn&sharerId12907601&sharereferPC&sharesourceFoyoDesigner&sharefromfrom_link <今日更新> 一、引子&…

beego文件上传

1file.go 2html代码 3路由设置 beego.Router("/file/Upload", &controllers.FileUploadController{}, "post:Upload") 注意 1&#xff0c;得新建个upload文件夹 2&#xff0c;路由设置严格区分大小写。 biiego文件下载上传代码 github 觉得不错Star下

2025-04-05 吴恩达机器学习5——逻辑回归(2):过拟合与正则化

文章目录 1 过拟合1.1 过拟合问题1.2 解决过拟合 2 正则化2.1 正则化代价函数2.2 线性回归的正则化2.3 逻辑回归的正则化 1 过拟合 1.1 过拟合问题 欠拟合&#xff08;Underfitting&#xff09; 模型过于简单&#xff0c;无法捕捉数据中的模式&#xff0c;导致训练误差和测试误…

基于Python的图书借阅推荐系统设计与实现

【Python】基于Python的图书借阅推荐系统设计与实现 &#xff08;完整系统源码开发笔记详细部署教程&#xff09;✅ 目录 一、项目简介二、项目界面展示三、项目视频展示 一、项目简介 本项目基于Python语言和Django框架开发&#xff0c;旨在为用户提供一个高可靠、高便捷的图…

Lua:第1-4部分 语言基础

1 Lua语言入门 1.1 程序段 我们将 Lua 语言执行的每一段代码&#xff08;例如&#xff0c;一个文件或交互模式下的一行&#xff09;称为一个程序段 &#xff08; Chunk &#xff09; &#xff0c;即一组命令或表达式组成的序列 。 1.2 一些词法规范 Lua 语言中的标识符&#…

2024版idea使用Lombok时报找不到符号

今天在springboot项目中使用Lombok的Builder注解&#xff0c;启动时居然报了找不到符号的错&#xff0c;如下图 于是开始了漫长的寻找之路&#xff0c;首先去settings->Plugins中看自己的Lombok插件是否启动&#xff0c;发现确实是如此&#xff0c;然后看网上的教程去加上这…

python中的sort使用

目录 sort()使用 排序处理 升序由小到大排序&#xff1a; sort与sorted 总结 降序由大到小排序&#xff1a; key 参数详解 按字符串长度升序排序 按字符串第二个字符排序 sort()使用 list.sort(keyNone, reverseFalse) 功能&#xff1a;对列表原地排序&#xff08;直接…

构建macOS命令速查手册:基于Flask的轻量级Web应用实践

构建macOS命令速查手册&#xff1a;基于Flask的轻量级Web应用实践 一、项目概述 本文介绍一个基于Flask框架开发的macOS命令速查Web应用。该应用通过结构化的命令数据存储和响应式前端设计&#xff0c;为用户提供便捷的命令查询体验&#xff0c;具备以下特点&#xff1a; 六…

APP的兼容性测试+bug定位方法

兼容性问题定位 一、为什么会有兼容性问题&#xff1f;二、APP兼容性测试场景三、常见的一些兼容性bug0. 引言1. 常见兼容性bug&#xff08;1&#xff09;界面性问题&#xff08;2&#xff09;内存不足&#xff08;3&#xff09;网络问题&#xff08;4&#xff09;权限问题 通过…

开源 PDF.js 文件编辑操作

一、PDF.js PDF.js 是 Mozilla 基金会推出的一个使用 HTML5 构建的 PDF 阅读器&#xff0c;它完全使用 JavaScript 编写。作为 Firefox 浏览器的默认 PDF 查看器&#xff0c;PDF.js 具有强大的兼容性和稳定性。它不仅支持 PDF 文件的查看和渲染&#xff0c;还提供了丰富的交互…

操作系统、虚拟化技术与云原生及云原生AI简述

目录 操作系统基础 操作系统定义 操作系统的组成 操作系统的分类 Linux操作系统特性 虚拟化技术 概述 CPU虚拟化 内存虚拟化 I/O虚拟化 虚拟化技术 虚拟化平台管理工具 容器 容器与云原生&#xff1a;详细介绍 容器的特点 什么是云原生&#xff1f; 云原生的特点 容器与云原生的…

深入理解 C++ 三大特性之一 继承

欢迎来到干货小仓库!!! 今日的Commit 是明日的 Releasse&#xff0c;用持续交付的心态活成终身迭代的版本。 1.继承的定义 1.1定义格式 1.2继承关系和访问限定符 1.3继承基类成员访问方式的变化 类成员/继承方式public继承protected继承private继承基类的public成员派生类的…

类 和 对象 的介绍

对象的本质是一种新的数据类型。类是一个模型&#xff0c;对象是类的一个具体化实例。为类创建实例也就是创建对象。 一、类&#xff08;class&#xff09; 类决定一个对象将是什么样的&#xff08;有什么属性、功能&#xff09;。类和变量一样&#xff0c;有名字。 1.创建类 …

LeetCode详解之如何一步步优化到最佳解法:20. 有效的括号

LeetCode详解系列的总目录&#xff08;持续更新中&#xff09;&#xff1a; LeetCode详解之如何一步步优化到最佳解法&#xff1a;前100题目录&#xff08;更新中...&#xff09;-CSDN博客 LeetCode详解系列的上一题链接&#xff1a; LeetCode详解之如何一步步优化到最佳解法…

Mydumper备份数据库

介绍&#xff1a; MyDumper是一个MySQL逻辑备份工具。它有2个工具&#xff1a; mydumper负责导出 MySQL 数据库的一致备份myloader从 mydumper 读取备份&#xff0c;连接到目标数据库并导入备份。 这两个工具都使用多线程功能。 下载链接&#xff1a; https://github.com/m…

BN测试和训练时有什么不同, 在测试时怎么使用?

我们来彻底搞懂 Batch Normalization&#xff08;BN&#xff09; 在训练和测试阶段的区别&#xff0c;以及 测试时怎么用。 &#x1f9e0; 一句话总结&#xff1a; 训练时&#xff1a;使用 当前 mini-batch 的均值和方差 测试时&#xff1a;使用 整个训练集估计的“滑动平均均值…

JavaWeb 课堂笔记 —— 02 JavaScript

本系列为笔者学习JavaWeb的课堂笔记&#xff0c;视频资源为B站黑马程序员出品的《黑马程序员JavaWeb开发教程&#xff0c;实现javaweb企业开发全流程&#xff08;涵盖SpringMyBatisSpringMVCSpringBoot等&#xff09;》&#xff0c;章节分布参考视频教程&#xff0c;为同样学习…

多GPU训练

写在前面 限于财力不足&#xff0c;本机上只有一个 GPU 可供使用&#xff0c;因此这部分的代码只能够稍作了解&#xff0c;能够使用的 GPU 也只有一个。 多 GPU 的数据并行&#xff1a;有几张卡&#xff0c;对一个小批量数据&#xff0c;有几张卡就分成几块&#xff0c;每个 …