数据库mysql导入导出数据需要注意的问题,作者只有600~800个表的处理经验

文章目录

  • 一、新建数据库的时候编码和排序规则尽量和原数据库完全一样
  • 二、表结构和表数据分开导入,不要同时导入
    • Navicat导出表结构
    • Navicat导入表结构
    • Navicat导出表数据
    • Navicat导入表数据
  • 三、编码问题
  • 四、执行顺序的问题
  • 五、迁移数据大小和速度的问题
  • 六、数据库分区分片问题
    • Navicat版本导致的问题
  • 其他
  • 参考文档

一、新建数据库的时候编码和排序规则尽量和原数据库完全一样

  • 这样可以避免过程存在的很多问题
  • 在MySQL 5.7版本中,默认排序规则为utf8mb4_general_ci。 在MySQL 8.0版本中,默认排序规则为utf8mb4_0900_ai_ci。 由于utf8mb4_0900_ai_ci是MySQL 8.0引入的排序规则,因此将MySQL 8.0版本的表导入到MySQL 5.7或MySQL 5.6版本时,会存在字符集无法识别的问题。
  • 作者建议:日常自己的项目,使用 utf8_general_ci 或者utf8mb4_general_ci 排序规则就好,反正自己的项目兼容性比速度重要。

二、表结构和表数据分开导入,不要同时导入

  • 分开导入可以方便处理遇到的问题
  • 一般表结构导入的速度快,但是表结构遇到的问题会比较多

Navicat导出表结构

在这里插入图片描述

Navicat导入表结构

在这里插入图片描述

Navicat导出表数据

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

Navicat导入表数据

在这里插入图片描述

三、编码问题

  • 如果导入sql的过程中表示排序规则不存在,那么对sql文件一键处理即可,把这个排序规则一键替换为存在的排序规则(作者通过这种方式解决了问题)
  • utf8转换为uft8mb4,uft8mb4字符长度比utf8长,在处理表结构编码问题的时候,可能导致一个新的问题出现,单条记录的存储长度大于设定值。

四、执行顺序的问题

  • 如果表存在外键依赖,那么外键的表需要更早创建
  • Navicat生成的sql文件,视图的执行顺序比方法更早,但是某些视图创建的过程用到了某些方法。如果按照默认执行顺序将会报错,解决办法是把方法放在视图创建之前执行。提前把方法创建好(作者遇到)

五、迁移数据大小和速度的问题

  • 作者迁移的是研发网的数据,我师傅和我说迁移部分表的数据,我感觉麻烦,于是把所有的数据都迁移了。总共500多万条的数据,导出大约6分钟,导入大约25分钟。

六、数据库分区分片问题

Navicat版本导致的问题

  • 同一个数据库,不同版本的Navicat导出的sql竟然会有略微的差异(不可思议),导致存在小问题(可能会出现错误)。可以用下面作者的sql作为尝试。
  • Navicat15版本出现了问题,但是我的Navicat12版本没有出现这个问题
    • sqldemo文件
      DROP TABLE IF EXISTS `t_dm_test`;CREATE TABLE `t_dm_test`(`id` varchar(42) NOT NULL COMMENT 'id',`name` VARCHAR(64) NOT NULL COMMENT '名字',`org_id` VARCHAR(64) NOT NULL COMMENT '组织id'
      ) ENGINE=INNODB DEFAULT CHARSET=utf8 COMMENT='临时表'
      /*!50500 PARTITION BY LIST COLUMNS(org_id)
      (PARTITION p01000 VALUES IN ('01000') ENGINE=INNODB,
      PARTITION p01001 VALUES IN ('01001') ENGINE=INNODB,
      PARTITION p01002 VALUES IN ('01002') ENGINE=INNODB) */;
      
    • 执行之后Navicat查看执行结果
      在这里插入图片描述
      在这里插入图片描述
    • 使用Navicat15把这个表重新导出得到的sql
      SET NAMES utf8mb4;
      SET FOREIGN_KEY_CHECKS = 0;-- ----------------------------
      -- Table structure for t_dm_test
      -- ----------------------------
      DROP TABLE IF EXISTS `t_dm_test`;
      CREATE TABLE `t_dm_test`  (`id` varchar(42) CHARACTER SET utf8mb3 COLLATE utf8mb3_general_ci NOT NULL COMMENT 'id',`name` varchar(64) CHARACTER SET utf8mb3 COLLATE utf8mb3_general_ci NOT NULL COMMENT '名字',`org_id` varchar(64) CHARACTER SET utf8mb3 COLLATE utf8mb3_general_ci NOT NULL COMMENT '组织id'
      ) ENGINE = InnoDB CHARACTER SET = utf8mb3 COLLATE = utf8mb3_general_ci COMMENT = '临时表' ROW_FORMAT = Dynamic PARTITION BY LIST COLUMNS (`org_id`)
      PARTITIONS 3
      (PARTITION `p01000` ENGINE = InnoDB MAX_ROWS = 0 MIN_ROWS = 0 ,
      PARTITION `p01001` ENGINE = InnoDB MAX_ROWS = 0 MIN_ROWS = 0 ,
      PARTITION `p01002` ENGINE = InnoDB MAX_ROWS = 0 MIN_ROWS = 0 )
      ;SET FOREIGN_KEY_CHECKS = 1;
      
    • 重新执行看看能不能执行
      在这里插入图片描述
      在这里插入图片描述

其他

  • 导入导出的过程中,电脑不要黑屏,不要睡眠,同时也一定不要动Navicat。动了很容易直接导致Navicat死机,进程死亡

参考文档

  • mysql排序规则

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/81873.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

板卡设计+硬件每日学习十个知识点(44)23.8.24 (检测单元设计,接口部分设计,板卡电源输入设计,电源检测电路)

文章目录 1.检测单元介绍(使用GD32单片机)2.GD32的最小系统板3.GD32的温度监测4.GD32的电压监测和电流监测5.GD32的布线6.接口部分设计7.板卡电源输入设计8.电源检测电路 1.检测单元介绍(使用GD32单片机) 答: 首先要为…

【Unity3D赛车游戏】【四】在Unity中添加阿克曼转向,下压力,质心会让汽车更稳定

👨‍💻个人主页:元宇宙-秩沅 👨‍💻 hallo 欢迎 点赞👍 收藏⭐ 留言📝 加关注✅! 👨‍💻 本文由 秩沅 原创 👨‍💻 收录于专栏:Uni…

java八股文面试[JVM]——类加载器

一、类加载器的概念 类加载器是Java虚拟机用于加载类文件的一种机制。在Java中,每个类都由类加载器加载,并在运行时被创建为一个Class对象。类加载器负责从文件系统、网络或其他来源中加载类的字节码,并将其转换为可执行的Java对象。类加载器…

vue 简单实验 v-bind 变量与html属性绑定

1.代码 <script src"https://unpkg.com/vuenext" rel"external nofollow" ></script> <div id"bind-attribute"><span v-bind:title"message">鼠标悬停几秒钟查看此处动态绑定的提示信息&#xff01;</sp…

《深度学习计算机视觉 》书籍分享(包邮送书三本)

深度学习计算机视觉介绍 随着计算机技术的发展和进步&#xff0c;计算机视觉领域得到了广泛的关注和研究。而深度学习作为一种强大的机器学习方法&#xff0c;已经成为计算机视觉领域的重要工具之一。本文将介绍深度学习在计算机视觉中的应用和取得的成果。 深度学习是一种模…

Log4Qt日志框架(1)- 引入到QT中

Log4Qt日志框架&#xff08;1&#xff09;- 引入到QT中 1 下载源码2 简介3 加入到自己的项目中3.1 使用库文件3.2 引入源文件 4 说明 1 下载源码 github&#xff1a;https://github.com/MEONMedical/Log4Qt 官方(版本较老)&#xff1a;https://sourceforge.net/projects/log4q…

【PHP】文件包含-includerequire

文章目录 文件包含意义&#xff1a;四种形式文件加载原理include和require的区别文件的加载路径文件嵌套包含 文件包含 文件包含&#xff1a;在一个PHP脚本中&#xff0c;去将另外一个文件&#xff08;PHP&#xff09;包含进来&#xff0c;去合作完成一件事情。 意义&#xf…

移动web开发rem适配布局

移动web开发rem适配布局 学习目标: 能够使用rem单位能够使用媒体查询的基本语法能够使用Less的基本语法能够使用Less中的嵌套能够使用Less中的运算能够使用2种rem适配方案 1.rem单位基础 2.媒体查询 2.1什么是媒体查询 媒体查询是css3的新语法 使用media查间&#xff0c…

动物体外受精手术VR模拟仿真培训系统保证学生及标本的安全

奶牛是养殖业主要的资源&#xff0c;因此保证奶牛的健康对养殖业的成功和可持续发展具有重要已用&#xff0c;奶牛有一些常见易发病&#xff0c;一旦处理不当&#xff0c;对奶牛业都会造成较大的经济损失&#xff0c;传统的奶牛手术培训实操难度大、风险高且花费大&#xff0c;…

掌握AI助手的魔法工具:解密Prompt(提示)在AIGC时代的应用「上篇」

在当今的AIGC时代&#xff0c;我们面临着越来越多的人工智能技术和应用。其中一个引人注目的工具就是Prompt&#xff08;提示&#xff09;。它就像是一种魔法&#xff0c;可以让我们与AI助手进行更加互动和有针对性的对话。那么&#xff0c;让我们一起来了解一下Prompt&#xf…

gitlab合并分支

我的分支为 cheng 第一步&#xff1a; 增加新的代码 第二步&#xff1a;提交并推送 第三步&#xff1a;打开gitlab&#xff0c;找到对应项目 这样就成功把cheng分支合并到dev-test分支了

2023年高教社杯 国赛数学建模思路 - 复盘:光照强度计算的优化模型

文章目录 0 赛题思路1 问题要求2 假设约定3 符号约定4 建立模型5 模型求解6 实现代码 建模资料 0 赛题思路 &#xff08;赛题出来以后第一时间在CSDN分享&#xff09; https://blog.csdn.net/dc_sinor?typeblog 1 问题要求 现在已知一个教室长为15米&#xff0c;宽为12米&…