数据库mysql导入导出数据需要注意的问题,作者只有600~800个表的处理经验

news2025/1/29 14:03:04

文章目录

  • 一、新建数据库的时候编码和排序规则尽量和原数据库完全一样
  • 二、表结构和表数据分开导入,不要同时导入
    • Navicat导出表结构
    • Navicat导入表结构
    • Navicat导出表数据
    • Navicat导入表数据
  • 三、编码问题
  • 四、执行顺序的问题
  • 五、迁移数据大小和速度的问题
  • 六、数据库分区分片问题
    • Navicat版本导致的问题
  • 其他
  • 参考文档

一、新建数据库的时候编码和排序规则尽量和原数据库完全一样

  • 这样可以避免过程存在的很多问题
  • 在MySQL 5.7版本中,默认排序规则为utf8mb4_general_ci。 在MySQL 8.0版本中,默认排序规则为utf8mb4_0900_ai_ci。 由于utf8mb4_0900_ai_ci是MySQL 8.0引入的排序规则,因此将MySQL 8.0版本的表导入到MySQL 5.7或MySQL 5.6版本时,会存在字符集无法识别的问题。
  • 作者建议:日常自己的项目,使用 utf8_general_ci 或者utf8mb4_general_ci 排序规则就好,反正自己的项目兼容性比速度重要。

二、表结构和表数据分开导入,不要同时导入

  • 分开导入可以方便处理遇到的问题
  • 一般表结构导入的速度快,但是表结构遇到的问题会比较多

Navicat导出表结构

在这里插入图片描述

Navicat导入表结构

在这里插入图片描述

Navicat导出表数据

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

Navicat导入表数据

在这里插入图片描述

三、编码问题

  • 如果导入sql的过程中表示排序规则不存在,那么对sql文件一键处理即可,把这个排序规则一键替换为存在的排序规则(作者通过这种方式解决了问题)
  • utf8转换为uft8mb4,uft8mb4字符长度比utf8长,在处理表结构编码问题的时候,可能导致一个新的问题出现,单条记录的存储长度大于设定值。

四、执行顺序的问题

  • 如果表存在外键依赖,那么外键的表需要更早创建
  • Navicat生成的sql文件,视图的执行顺序比方法更早,但是某些视图创建的过程用到了某些方法。如果按照默认执行顺序将会报错,解决办法是把方法放在视图创建之前执行。提前把方法创建好(作者遇到)

五、迁移数据大小和速度的问题

  • 作者迁移的是研发网的数据,我师傅和我说迁移部分表的数据,我感觉麻烦,于是把所有的数据都迁移了。总共500多万条的数据,导出大约6分钟,导入大约25分钟。

六、数据库分区分片问题

Navicat版本导致的问题

  • 同一个数据库,不同版本的Navicat导出的sql竟然会有略微的差异(不可思议),导致存在小问题(可能会出现错误)。可以用下面作者的sql作为尝试。
  • Navicat15版本出现了问题,但是我的Navicat12版本没有出现这个问题
    • sqldemo文件
      DROP TABLE IF EXISTS `t_dm_test`;
      
      CREATE TABLE `t_dm_test`(
      	`id` varchar(42) NOT NULL COMMENT 'id',
      	`name` VARCHAR(64) NOT NULL COMMENT '名字',
      	`org_id` VARCHAR(64) NOT NULL COMMENT '组织id'
      ) ENGINE=INNODB DEFAULT CHARSET=utf8 COMMENT='临时表'
      /*!50500 PARTITION BY LIST COLUMNS(org_id)
      (PARTITION p01000 VALUES IN ('01000') ENGINE=INNODB,
      PARTITION p01001 VALUES IN ('01001') ENGINE=INNODB,
      PARTITION p01002 VALUES IN ('01002') ENGINE=INNODB) */;
      
    • 执行之后Navicat查看执行结果
      在这里插入图片描述
      在这里插入图片描述
    • 使用Navicat15把这个表重新导出得到的sql
      SET NAMES utf8mb4;
      SET FOREIGN_KEY_CHECKS = 0;
      
      -- ----------------------------
      -- Table structure for t_dm_test
      -- ----------------------------
      DROP TABLE IF EXISTS `t_dm_test`;
      CREATE TABLE `t_dm_test`  (
        `id` varchar(42) CHARACTER SET utf8mb3 COLLATE utf8mb3_general_ci NOT NULL COMMENT 'id',
        `name` varchar(64) CHARACTER SET utf8mb3 COLLATE utf8mb3_general_ci NOT NULL COMMENT '名字',
        `org_id` varchar(64) CHARACTER SET utf8mb3 COLLATE utf8mb3_general_ci NOT NULL COMMENT '组织id'
      ) ENGINE = InnoDB CHARACTER SET = utf8mb3 COLLATE = utf8mb3_general_ci COMMENT = '临时表' ROW_FORMAT = Dynamic PARTITION BY LIST COLUMNS (`org_id`)
      PARTITIONS 3
      (PARTITION `p01000` ENGINE = InnoDB MAX_ROWS = 0 MIN_ROWS = 0 ,
      PARTITION `p01001` ENGINE = InnoDB MAX_ROWS = 0 MIN_ROWS = 0 ,
      PARTITION `p01002` ENGINE = InnoDB MAX_ROWS = 0 MIN_ROWS = 0 )
      ;
      
      SET FOREIGN_KEY_CHECKS = 1;
      
    • 重新执行看看能不能执行
      在这里插入图片描述
      在这里插入图片描述

其他

  • 导入导出的过程中,电脑不要黑屏,不要睡眠,同时也一定不要动Navicat。动了很容易直接导致Navicat死机,进程死亡

参考文档

  • mysql排序规则

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/924169.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

element-ui中的el-table的summary-method(合计)的使用

场景图片: 图片1: 图片2: 一:使用element中的方法 优点: 直接使用summary-method方法,直接,方便 缺点: 只是在表格下面添加了一行,如果想有多行就不行了 1:h…

成都瀚网科技:抖店如何经营?

作为热门的短视频分享平台,抖音不仅是一种娱乐工具,更是一个蕴藏着无限商机的电商平台。开店、抖音下单成为很多人的选择。那么,抖音如何开店、下单呢? 1、如何在抖音上开店和下单? 注册账号:首先&#xff…

Java调用高德地图API根据经纬度获取区县

在开发中,有时候需要根据经纬度来获取对应的区县信息,这可以通过调用高德地图的API来实现。本篇文章将介绍如何使用Java代码调用高德地图API来根据经纬度获取区县信息。 前提条件 首先,你需要注册一个高德地图开发者账号,并获取…

如何做好作品集?告诉你这7个技巧

又到了一年一度的求职季,无论你是毕业生、专业人士还是自由职业者,一个高质量的个人作品集都是你的第一块垫脚石。作品集的制作是你工作能力的缩影,也是面试官认识你的第一站。制作一个作品集需要展示你的广度、技能和经验,甚至是…

17.3 【Linux】systemctl 针对 service 类型的配置文件

17.3.1 systemctl 配置文件相关目录简介 服务的管理是通过 systemd,而 systemd 的配置文件大部分放置于/usr/lib/systemd/system/ 目录内。但是 Red Hat 官方文件指出, 该目录的文件主要是原本软件所提供的设置,建议不要修改!而要…

如何获取Ck

1. 下载via浏览器 https://viayoo.com/zh-cn/ 2.打开via浏览器, 登录美团外卖 美团网账号登录-手机美团官网 3.点击左上角的盾牌 然后点击这里 最后去我的网站粘贴就行

肽在化妆品中的应用是怎样的呢?

传统的化妆品功能原料多为化学合成或植物提取,而近几年以来明显的往生物美容和基因美容方面发展,肽类的原料和成品非常的活跃,其活性成分的小分子肽是由一定序列的多个氨基酸组成。自然界中生物体内多数生物反应和进化过程在一定程度上是由特…

(学习笔记-调度算法)内存页面置换算法

在了解内存页面置换算法前,我们得先了解 缺页异常(缺页中断)。 当 CPU 访问的页面不在物理内存中时,便会产生一个缺页中断,请求操作系统将缺页调入到物理内存。那它与一般的中断主要区别在于: 缺页中断在指令执行 [期…

netapp fas存储更换故障硬盘

在机房查看SSN的 位置示意图 SSH连接集群管理IP,使用以下命令采集日志,将输出内容保存为txt文件,发给400 使用Putty通过SSH访问设备IP 链接后,输入用户名,密码 进入命令行界面,搜集日志 ::> syst…

c++(8.24)拷贝赋值对象,匿名对象,友元,常成员和常对象,mutable关键字,运算符重载

作业&#xff1a; 实现关系运算符重载&#xff08;仅>,<,&#xff09;&#xff1a; #include <iostream>using namespace std;class Person {int a;int b;friend bool operator (const Person &L,const Person&R); public:Person(){}Person(int a,int b)…

【PostGreSQL】PostGreSQL到Oracle的数据迁移

项目需要&#xff0c;有个数据需要导入&#xff0c;拿到手一开始以为是mysql&#xff0c;结果是个PostGreSQL的数据&#xff0c;于是装数据库&#xff0c;但这个也不懂呀&#xff0c;而且本系统用的Oracle&#xff0c;于是得解决迁移转换的问题。 总结下来两个思路。 1、Postg…

七、pikachu之不安全的文件下载

文章目录 1、不安全的文件下载简介2、实战 1、不安全的文件下载简介 文件下载功能在很多web系统上都会出现&#xff0c;一般我们当点击下载链接&#xff0c;便会向后台发送一个下载请求&#xff0c;一般这个请求会包含一个需要下载的文件名称&#xff0c;后台在收到请求后&…

【附安装包】CIMCO Edit2022安装教程

软件下载 软件&#xff1a;CIMCO Edit版本&#xff1a;2022语言&#xff1a;简体中文大小&#xff1a;251.79M安装环境&#xff1a;Win11/Win10/Win8/Win7硬件要求&#xff1a;CPU2.0GHz 内存4G(或更高&#xff09;下载通道①百度网盘丨64位下载链接&#xff1a;https://pan.b…

新功能:部署远程办公支持第三方授权登录

随着业务的发展和信息管理的完善&#xff0c;企业的应用系统也逐渐增多&#xff0c;每个软件系统使用各自的软件数据&#xff0c;独立的用户管理模式&#xff0c;不仅会增加部署成本&#xff0c;对于企业应用平台化管理也是不小的挑战。 对于企业而言&#xff0c;如何实现应用系…

电商平台京东平台获得京东商品描述API接口演示案例

京东商品描述API接口可以获取京东商品描述&#xff1a; 详细介绍商品的特点和功能,让消费者能够了解商品的具体用途和效果。 使用简洁明了的语言,避免使用过于专业的术语和长句子,让消费者能够轻松理解。 重点突出商品的卖点和优势,让消费者能够更加清晰地了解商品的价值 …

SpingMVC拦截器-用户登录权限控制分析

视频链接&#xff1a;08-SpringMVC拦截器-用户登录权限控制代码实现2_哔哩哔哩_bilibili 114 1、做了一个用户跟角色添加的相关操作 1.1 这个后台工程&#xff0c;没有进行相关操作也能够进行登录&#xff1a; 2、现在我做一个用户的权限控制&#xff0c;如果当前我没有进行操…

马原——5.两大总特征(辩证法)

两大总特征是解释了世界是怎样存在的。 三大规律是对两大总特征的进一步细化 对立统一规律解释了世界是怎样联系的&#xff0c;为什么发展 量变质变规律解释了怎样发展 否定之否定规律那里发展 五对基本范畴解释了联系和发展环节上的逻辑 客观性&#xff1a;不以人的意志为转…

vscode | 开发神器vscode必备优秀插件

目录 一、koroFileHeader1.1 使用方法1.2 配置推荐 二、Markdown Preview Enhanced三、filesize四、Project Manager五、Live Server六、Bookmarks七、Image preview八、Chinese (Simplified) (简体中文) Language九、主题相关9.1 vscode-icons9.2 Winter is Coming Theme9.3 O…

Unity 之 Start 与Update 方法的区别

文章目录 当谈论Unity中的 Start和 Update方法时&#xff0c;我们实际上是在讨论MonoBehaviour类中的两个常用方法&#xff0c;用于编写游戏逻辑。这两个方法在不同的时机被调用&#xff0c;因此您可以根据需要选择在哪个方法中编写特定的代码。 Start 方法&#xff1a; Start…

(线特征)opencv+opencv contribute 配置

写一篇博客&#xff0c;记录开始线特征slam的历程。 在配置环境的时候&#xff0c;可以发现大多数都是用到了opencv3.4.16和其contribute版本&#xff0c;这里进行一个相关操作的教学。配置环境是在Ubuntu下面进行的&#xff0c;建议使用Ubuntu18来进行线特征的配置以及代码的…