【MySQL】总结:外部txt数据导入MySQL的避坑指南(ERROR code: 3948/2068/1300/1366)

本文主要是介绍【MySQL】总结:外部txt数据导入MySQL的避坑指南(ERROR code: 3948/2068/1300/1366),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

(一)背景:

昨天在导入外部数据(txt文件)到MySQL时成功收获5连错,花了小半天把问题解决,意识到这或许是新手在导入数据时容易出现的问题。因此决定基于报错问题总结导入外部数据时要注意的事项,希望能够帮到MySQL学习的同好们。

(二)环境及语句:

Windows 10;

MySQL Server 8.0.29;

MySQL Workbench 8.0.29;

(三)结论:

我导入txt文件的代码如下:

 语句模板为:

 # 导入外部数据到Monthly_Indicator中load data infile 'txt文件的绝对路径(包含扩展名)'into table 目标表格fields terminated by '\t' # 我的txt文件分割方式为制表符,制表符符号为'\t',因此指定MySQL导入时的分割方式为'\t';ignore 1 lines;# 我的txt文件第一行是字段名,导入时应忽略字段名,故指定MySQL忽略第一行;

需要注意的事项为:

  1. 请检查你的local_infile状态,确保它是打开的;

  2. 请将txt文件编码格式改成utf-8;

  3. 请确保外部文件对应字段的数据类型和MySQL中的一致;

  4. 请将txt文件移至MySQL Server路径的Uploads文件夹中:

(四)避坑总结:

1. 请检查你的local_infile状态:

  • local_infile是全局系统变量,功能是决定能否使用load data local infile的命令。
  • MySQL 8.0.29 中,local_infile的默认状态是关闭的。
  • 因此,如果想利用load data local infile录入外部数据,请先将其打开。
  • 未打开local_infile的报错为:

       ERROR: 3948, Loading local data is disabled - this must be enabled on both the client and server sides.

打开local_infile的方式如下:

  • 打开MySQL Server 8.0 Command Line Clinet:


  • 检查local_infile状态:

    输入如下语句

    mysql > show variables like 'local_infile';
    # 输入上述语句就能够检查local_infile状态。
    (mysql > 是打开客户端后自动显示的,所以不用重复输入)

     

    可以看到local_infile的Value为"OFF“,此时的local_infile是关闭的,无法通过load data local infile导入外部数据。

  • 打开local_infile开关:

    (1)输入如下语句

set global local_infile = 1;

 

 (2)再次检查local_infile状态:

可以看见此时的local_infile已经打开了。

2. 请将txt文件编码格式改成utf-8:

  • MySQL的默认编码是utf8;
  • txt文件的默认编码是ANSI;
  • 如果不改txt文件编码就直接导入MySQL,则会读取失败;
  • 不改txt文件编码的报错为:

      Error Code: 1300. Invalid utf8mb4 character string:''

改变txt的编码,只需要打开目标文件,点击【另存为】,在弹出界面的右下角就能够选择编码格式,我们选择UTF-8就好了。

 3. 请确保外部文件对应字段的数据类型和MySQL中的一致:

  • 导入数据前,我们会现在MySQL中定义表,并为字段设置数据类型;
  • 如果txt文件对应的字段数据类型和MySQL对应字段数据类型不一致,就可能会发生报错;
  • 例子MySQL中字段ranking设置为整型,而txt中ranking却是字符' - '。那么,在将txt录入MySQL时,ranking数据的录入就会因为数据类型不符而失败;
  • 数据类型不匹配时的报错为:

      Error Code: 1366. Incorrect integer value: '- ' for column 'ranking' at row 1

      (仅展示一种情况,实际报错情况不仅限于这一种)

4. 请将txt文件移至MySQL Server路径的Uploads文件夹中:

  • 未将txt文件移至Uploads文件夹的报错为:

      Error Code: 2068. LOAD DATA LOCAL INFILE file request rejected due to restrictions on access.

 由于不把txt文件移到Uploasd文件夹下会报错,所以我们应该将txt移进去,方法如下:

(1)找到你的MySQL Server路径:

如果是自定义路径安装的,指定的路径就是MySQL Server8.0的路径;如果忘记了路径在哪里,可以打开 MySQL Server 8.0 Command Line Clinet,输入以下语句找回:

show variables like '%basedir%';

 

(2)将txt文件移到MySQL Server8.0\Uploads中: 

双击MySQL Server8.0后,进入Uploads文件夹。

 将txt文件移到这里就好了。

 

这篇关于【MySQL】总结:外部txt数据导入MySQL的避坑指南(ERROR code: 3948/2068/1300/1366)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/364825

相关文章

SpringBoot分段处理List集合多线程批量插入数据方式

《SpringBoot分段处理List集合多线程批量插入数据方式》文章介绍如何处理大数据量List批量插入数据库的优化方案:通过拆分List并分配独立线程处理,结合Spring线程池与异步方法提升效率... 目录项目场景解决方案1.实体类2.Mapper3.spring容器注入线程池bejsan对象4.创建

PHP轻松处理千万行数据的方法详解

《PHP轻松处理千万行数据的方法详解》说到处理大数据集,PHP通常不是第一个想到的语言,但如果你曾经需要处理数百万行数据而不让服务器崩溃或内存耗尽,你就会知道PHP用对了工具有多强大,下面小编就... 目录问题的本质php 中的数据流处理:为什么必不可少生成器:内存高效的迭代方式流量控制:避免系统过载一次性

Python正则表达式匹配和替换的操作指南

《Python正则表达式匹配和替换的操作指南》正则表达式是处理文本的强大工具,Python通过re模块提供了完整的正则表达式功能,本文将通过代码示例详细介绍Python中的正则匹配和替换操作,需要的朋... 目录基础语法导入re模块基本元字符常用匹配方法1. re.match() - 从字符串开头匹配2.

C#实现千万数据秒级导入的代码

《C#实现千万数据秒级导入的代码》在实际开发中excel导入很常见,现代社会中很容易遇到大数据处理业务,所以本文我就给大家分享一下千万数据秒级导入怎么实现,文中有详细的代码示例供大家参考,需要的朋友可... 目录前言一、数据存储二、处理逻辑优化前代码处理逻辑优化后的代码总结前言在实际开发中excel导入很

MySQL的JDBC编程详解

《MySQL的JDBC编程详解》:本文主要介绍MySQL的JDBC编程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录前言一、前置知识1. 引入依赖2. 认识 url二、JDBC 操作流程1. JDBC 的写操作2. JDBC 的读操作总结前言本文介绍了mysq

java.sql.SQLTransientConnectionException连接超时异常原因及解决方案

《java.sql.SQLTransientConnectionException连接超时异常原因及解决方案》:本文主要介绍java.sql.SQLTransientConnectionExcep... 目录一、引言二、异常信息分析三、可能的原因3.1 连接池配置不合理3.2 数据库负载过高3.3 连接泄漏

Linux下MySQL数据库定时备份脚本与Crontab配置教学

《Linux下MySQL数据库定时备份脚本与Crontab配置教学》在生产环境中,数据库是核心资产之一,定期备份数据库可以有效防止意外数据丢失,本文将分享一份MySQL定时备份脚本,并讲解如何通过cr... 目录备份脚本详解脚本功能说明授权与可执行权限使用 Crontab 定时执行编辑 Crontab添加定

oracle 11g导入\导出(expdp impdp)之导入过程

《oracle11g导入导出(expdpimpdp)之导入过程》导出需使用SEC.DMP格式,无分号;建立expdir目录(E:/exp)并确保存在;导入在cmd下执行,需sys用户权限;若需修... 目录准备文件导入(impdp)1、建立directory2、导入语句 3、更改密码总结上一个环节,我们讲了

JavaScript中的高级调试方法全攻略指南

《JavaScript中的高级调试方法全攻略指南》什么是高级JavaScript调试技巧,它比console.log有何优势,如何使用断点调试定位问题,通过本文,我们将深入解答这些问题,带您从理论到实... 目录观点与案例结合观点1观点2观点3观点4观点5高级调试技巧详解实战案例断点调试:定位变量错误性能分

Java使用jar命令配置服务器端口的完整指南

《Java使用jar命令配置服务器端口的完整指南》本文将详细介绍如何使用java-jar命令启动应用,并重点讲解如何配置服务器端口,同时提供一个实用的Web工具来简化这一过程,希望对大家有所帮助... 目录1. Java Jar文件简介1.1 什么是Jar文件1.2 创建可执行Jar文件2. 使用java