MySQL数据导出导出的三种办法(13/16)

数据导入导出

基本概述

目前常用的有3中数据导入与导出方法:

  1. 使用mysqldump工具

    • 优点
      • 简单易用,只需一条命令即可完成数据导出。
      • 可以导出表结构和数据,方便完整备份。
      • 支持过滤条件,可以选择导出部分数据。
      • 生成的文件可以用于跨平台、跨版本的数据迁移。
    • 缺点
      • 导出的数据包含额外的INSERT语句,可能导致导入速度较慢。
      • 不能使用复杂的JOIN条件作为过滤条件。
    • 推荐场景
      • 需要备份和迁移表结构和数据。
      • 需要导出部分数据到其他系统或进行数据分析。
  2. 导出CSV文件

    • 优点
      • CSV格式通用,易于在不同应用程序间交换数据。
      • 可以利用文本编辑器查看和编辑数据。
      • 支持所有SQL写法的过滤条件。
    • 缺点
      • 导出的数据保存在服务器本地,可能受到secure_file_priv参数限制。
      • 每次只能导出一张表的数据。
      • 需要单独备份表结构。
    • 推荐场景
      • 需要将数据导出到本地文件系统或共享网络位置。
      • 需要将数据导入到其他非MySQL系统或应用程序。
  3. 物理拷贝表空间

    • 优点
      • 速度极快,尤其是对于大表数据的复制。
      • 可以直接复制整个表的数据,不需要逐条插入。
    • 缺点
      • 需要服务器端操作,无法在客户端完成。
      • 必须是全表拷贝,不能选择性导出数据。
      • 仅限于InnoDB引擎的表。
    • 推荐场景
      • 需要快速复制大表数据到另一个数据库或服务器。
      • 源表和目标表都使用InnoDB引擎。
      • 有服务器文件系统的访问权限。

在选择使用哪种方法时,还需要考虑数据的大小、是否需要跨平台迁移、是否有权限访问服务器文件系统、是否需要保留表结构等因素。通常,如果需要快速迁移大量数据并且对数据的完整性有高要求,物理拷贝表空间是一个好选择。如果数据量较小或者需要跨平台迁移,使用mysqldump或导出CSV文件可能更合适。

mysqldump工具
  1. 使用mysqldump导出数据

    mysqldump -h$host -P$port -u$user --add-locks=0 --no-create-info --single-transaction --set-gtid-purged=OFF db1 t --where="a>900" --result-file=/client_tmp/t.sql
    
    -h: 指定MySQL服务器的主机名。$host: 替换为实际的主机名。
    -P: 指定MySQL服务器的端口号。$port: 替换为实际的端口号。
    -u: 指定登录MySQL的用户名。`$user`: 替换为实际的用户名。
    --add-locks=0: 导出时不增加额外的锁。
    --no-create-info: 不导出表结构。
    --single-transaction: 在导出数据时不需要对表加表锁。
    --set-gtid-purged=OFF: 不输出与GTID相关的信息。
    db1: 指定要导出的数据库名。
    t: 指定要导出的表名。
    --where="a>900": 导出满足条件a>900的数据。
    --result-file=/client_tmp/t.sql: 指定导出结果的文件路径。
    
  2. 将数据导入到目标数据库

    mysql -h127.0.0.1 -P13000 -uroot db2 -e "source /client_tmp/t.sql"
    `-h`: 指定MySQL服务器的主机名。`root`: 使用root用户登录。
    `-P`: 指定MySQL服务器的端口号。
    `-u`: 指定登录MySQL的用户名。
    `db2`: 指定要导入数据的数据库名。
    `-e`: 后面跟随要执行的命令。
    `"source /client_tmp/t.sql"`: 执行source命令导入之前导出的SQL文件。
    
文件导入导出
  1. 导出为CSV文件

    SELECT * FROM db1.t WHERE a > 900 INTO OUTFILE '/server_tmp/t.csv';
    
    
    SELECT * FROM db1.t: 指定要导出的查询。
    WHERE a > 900: 导出满足条件的数据。
    INTO OUTFILE '/server_tmp/t.csv': 指定导出结果的CSV文件路径。
    
  2. 导入CSV文件到目标表

    LOAD DATA INFILE '/server_tmp/t.csv' INTO TABLE db2.t;
    
    LOAD DATA INFILE: 加载数据的命令。
    '/server_tmp/t.csv': 指定CSV文件的路径。
    INTO TABLE db2.t: 指定要导入数据的目标表。
    

在MySQL中secure_file_priv用于限制LOAD DATA INFILESELECT ... INTO OUTFILE这两个命令生成或读取文件的位置。这个参数的目的是为了增强安全性,防止意外或恶意地读取或写入服务器上的敏感文件。

如果secure_file_priv被设置为空字符串('')或者NULL,则表示没有文件路径限制,可以使用任意文件路径。但是,这种设置降低了系统的安全性,因此不推荐在生产环境中使用。

物理拷贝表空间
  1. 物理拷贝表空间

    • 首先创建一个相同结构的空表:
      CREATE TABLE db2.r LIKE db1.t;
      
    • 然后丢弃表空间:
      ALTER TABLE db2.r DISCARD TABLESPACE;
      
    • 导出表文件:
      FLUSH TABLES db1.t FOR EXPORT;
      
    • 拷贝文件:
      cp /path/to/db1/t.ibd /path/to/db2/r.ibd
      cp /path/to/db1/t.cfg /path/to/db2/r.cfg
      
    • 解锁表并导入表空间:
      UNLOCK TABLES;
      ALTER TABLE db2.r IMPORT TABLESPACE;
      

作者与版本更新计划

感谢您的阅读与支持!本文是《MySQL实战与优化》专栏中的一篇精选文章,该专栏共包含16篇文章,旨在为您提供实战中可直接应用的宝贵知识。

关注公众号【数舟】,获取作者最新动态,公众号后台回复【mysql2024】,即可免费领取这份包含16篇文章的完整的PDF专栏!

目前版本为v1.0,更新时间2024年4月10日。后续此文档更新与版本发布会同步到知识星球【数舟】中。

知识整理与创作不易,感谢大家理解与支持!

加入知识星球,您将获得更多独家内容、专栏更新以及与行业内专家和同行的互动交流机会。我们在知识星球等您,一起探索MySQL的深层次世界!

星球内目前包含300+精品文章,内容涵盖大数据、MySQL、运维、Python、调优、经验分享、数据分析等方向内容,会根据大家的学习需求更新更多方向的内容。

🔗 立即扫描下方二维码,加入知识星球,与行业精英共同成长,开启您的专属学习之旅!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/538117.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

python知识点汇总(十一)

python知识点总结 1、当Python退出时,是否会清除所有分配的内存?2、Python的优势有哪些?3、什么是元组的解封装4、Python中如何动态获取和设置对象的属性?5、创建删除操作系统上的文件6、主动抛出异常7、help() 函数和 dir() 函数…

数据结构-----枚举、泛型进阶(通配符?)

文章目录 枚举1 背景及定义2 使用3 枚举优点缺点4 枚举和反射4.1 枚举是否可以通过反射,拿到实例对象呢? 5 总结 泛型进阶1 通配符 ?1.1 通配符解决什么问题1.2 通配符上界1.3 通配符下界 枚举 1 背景及定义 枚举是在JDK1.5以后引入的。主要用途是&am…

加速杂交水稻走向世界 政协委员建议在湖南设立一“协会”一“中心”

中新网北京3月8日电 (刘曼)针对中国杂交水稻海外“飘香”的现象,全国政协委员、湖南省政协副主席、民盟湖南省委会主委何寄华建议,在湖南建立杂交水稻国际合作交流协会、设立杂交水稻国际科技合作技术转移中心,支持杂交水稻走向世界。 全国政…

计算机基础知识-第7章-程序的本质(2)——算法与数据结构概论

一、算法数据结构程序 提出这一公式并以此作为其一本专著的书名的瑞士计算机科学家尼克劳斯沃思(Niklaus Wirth)由于发明了多种影响深远的程序设计语言,并提出结构化程序设计这一革命性概念而获得了1984年的图灵奖。他是至今惟一获此殊荣的瑞…

Python爬取链家数据

技术:requests、BeautifulSoup、SQLite 解析页面,存数据到SQLite数据库,到时候你用navicat导出成csv什么的就行 1、确定城市 以天津为例,网页是https://tj.lianjia.com/ershoufang/rs/ 把上面这些地区名字复制 2、爬取数据内容…

三天做完pandas数据分析50题第一天

三天做完pandas数据分析50题第一天 第1题 将python的list转换为Series第2题 将字典转换为Series第3题 将Series转换成python的list第4题 使用numpy创建series。第5题 如何为Series添加新的元素?第6题 使用字典创建DataFrame第7题 给DataFrame设置索引列第8题 生成一…

每日一题---OJ题: 合并两个有序链表

嗨!小伙伴们,好久不见啦! 今天我们来看看一道很有意思的一道题---合并两个有序链表 嗯,题目看上去好像不难,我们一起画图分析分析吧! 上图中,list1有3个结点,分别为1,2,3 ; list2中有3个结点,分别为1,3,4, 题目要求我们要将这两个链表合并到一起,并且是升序,最后将链表返回。 …

光威神策PRO PCIe 5.0 SSD发布,国产固态硬盘进入10G俱乐部

全球半导体供应链的紧张局势和闪存资源的短缺让许多行业都面临着不小的压力 , 连带的也让消费者难以获取物美价廉的闪存产品 。但是,总有一些企业能够逆流而上, 像是 光威科技这家国产存储品牌, 最近就给国内消费者 带来了一个惊喜…

mybatis05:复杂查询:(多对一,一对多)

mybatis05:复杂查询:(多对一,一对多) 文章目录 mybatis05:复杂查询:(多对一,一对多)前言:多对一 : 关联 : 使用associatio…

Echarts-实现地图并轮播地图信息

目录 ./map-geojson/jinhua.json./CenterMap.vue./center.vue 使用地图组件效果 ./map-geojson/jinhua.json {"type":"FeatureCollection","features":[{"type":"Feature","properties":{"adcode":330…

力扣—2024 春招冲刺百题计划

矩阵 1. 螺旋矩阵 代码实现: /** param matrix int整型二维数组 * param matrixRowLen int matrix数组行数* param matrixColLen int* matrix数组列数* return int整型一维数组* return int* returnSize 返回数组行数 */ int* spiralOrder(int **matrix, int matri…

网工内推 | 网络工程师,13薪,周末双休,华三、华为认证优先

01 路邦远大 招聘岗位:网络工程师 职责描述: 1、配合市场销售人员,做好产品的售后服务工作; 2、负责项目方案安装调试指导以及日常客户使用培训,对客户提出的问题提出解决方案; 3、为客户提供专业、规范的…

图片作为背景的闪白问题,6种基础方案, 不会不知道吧

前言 关于【SSD系列】: 前端一些有意思的内容,旨在3-10分钟里, 500-1500字,有所获,又不为所累。 某天,发现有背景图片的弹出框,会出现闪白现象,这,兄弟们,你…

导入芯片原厂SDK Mirror源码到gerrit

下载镜像代码 repo init --mirror --repo-url ssh://xx/repo.git -u ssh://xx/manifests.git -m manifest.xml repo sync 创建AOSP project 对All Project权限修改 创建repo 在刚才下载的codebase根目录执行如下命令: repo forall -c echo $REPO_PROJECT; ssh -p 29…

C++ AVL树底层实现原理

💓博主CSDN主页:麻辣韭菜💓   ⏩专栏分类:C知识分享⏪   🚚代码仓库:C高阶🚚   🌹关注我🫵带你学习更多C知识   🔝🔝 目录 前言 AVL 树 1.1 AVL树的概念 1.2 AVL树…

【Hadoop大数据技术】——Flume日志采集系统(学习笔记)

📖 前言:在大数据系统的开发中,数据收集工作无疑是开发者首要解决的一个难题,但由于生产数据的源头丰富多样,其中包含网站日志数据、后台监控数据、用户浏览网页数据等,数据工程师要想将它们分门别类的采集…

永恒之蓝(ms17-010)复现

永恒之蓝 永恒之蓝(Eternal Blue)爆发于2017年4月14日晚,是一种利用Windows系统的SMB协议漏洞来获取系统的最高权限,以此来控制被入侵的计算机。甚至于2017年5月12日, 不法分子通过改造“永恒之蓝”制作了wannacry勒索…

ARM架构麒麟操作系统安装配置Mariadb数据库

、安装配置JDK (1)检查机器是否已安装JDK 执行 java -version命令查看机器是否安装JDK,一般麒麟操作系统默认安装openjdk 1.8。 (2)安装指定版本JDK 如果麒麟操作系统默认安装的openjdk 1.8不符合需求的话,可以卸载机器安装的openjdk 1.8并按需安装所需的openjdk版本…

软件杯 深度学习人体语义分割在弹幕防遮挡上的实现 - python

文章目录 1 前言1 课题背景2 技术原理和方法2.1基本原理2.2 技术选型和方法 3 实例分割4 实现效果5 最后 1 前言 🔥 优质竞赛项目系列,今天要分享的是 🚩 深度学习人体语义分割在弹幕防遮挡上的应用 该项目较为新颖,适合作为竞…

Python爬虫与API交互:如何爬取并解析JSON数据

目录 前言 一、什么是API和JSON数据 二、准备环境 三、发送API请求并获取数据 四、解析JSON数据 五、完整代码示例 六、总结 前言 随着互联网的发展,越来越多的网站提供了API接口,供开发者获取实时数据。在爬虫领域中,与API交互并解析…