MySQL创建全文索引时,遇到“Temporary file write failure”的错误

news2025/1/8 5:03:37

MySQL创建全文索引时,遇到“Temporary file write failure”的错误

环境信息

MySQL Version: 8.0.28
engine: InnoDB
rows: 100
index length: 10MB
data length: 30MB

笔者在MYSQL上执行创建添加全文索引的语句:alter table users add fulltext index idx_name(name)时报错。

Temporary file write failure

错误表示 MySQL 发生了临时文件写入失败的错误。这种错误通常发生在 MySQL 尝试将临时数据写入磁盘时遇到问题。

MySQL在创建全文索引的过程中,涉及将文本数据进行分词、建立索引结构和排序等操作。这些操作可能需要处理大量的中间数据,因此可能需要使用临时文件来存储和处理这些数据。这些临时文件通常存储在配置的临时文件目录中(通过tmpdir参数配置)。

而上面的错误可能有以下几个原因和解决方法:

  • 磁盘空间不足:检查磁盘空间是否充足,确保有足够的可用空间供 MySQL 写入临时文件。如果磁盘空间不足,可以清理磁盘上的不必要文件或扩大磁盘容量。

  • 文件系统权限问题:确保 MySQL 进程有足够的权限向指定的目录写入临时文件。检查临时文件存储目录的权限设置,并确保 MySQL 用户具有写入权限。

  • 文件系统错误或损坏:如果文件系统本身存在问题,可能会导致临时文件写入失败。在这种情况下,可以尝试修复文件系统或更换存储介质。

  • 其他系统级问题:临时文件写入失败可能是由于其他系统级问题引起的,例如磁盘故障、操作系统错误等。在这种情况下,建议检查系统日志以获取更多详细信息。

但是一一排查过后,发现不是上述问题。

首先表很小,只有30MB,磁盘仍有200G剩余空间,所以不是磁盘空间不足的问题,并且数据库上正常的写入和查询都是正常,所以也排除权限和文件系统损坏的问题。所以问题是什么呢?

后面经过一番排查,发现是mysql这个版本(MySQL 8.0.28, 8.0.32 )的bug导致的,我们可以找到这个bug链接 。

文档中提到,当innodb_disable_sort_file_cache为ON时,无法在表上创建全文索引,错误提示:临时文件写入失败。

When starting mysqld and using innodb_disable_sort_file_cache=ON, we will fail to create a full-text index on the table. The error message: Temporary file write failure> When this error occurs, the disk still has a lot of space. The reason for this error is that when innodb_disable_sort_file_cache=ON, during the process of parsing DDL, fail to write 25 bytes to temporary file.

MySQL 的验证团队已经验证了该 Bug 并对其进行了确认。目前该 Bug 的状态为 "Verified"。

我们可以通过将innodb_disable_sort_file_cache设置为OFF,暂时规避这个问题。

innodb_disable_sort_file_cache参数的含义

Disables the operating system file system cache for merge-sort temporary files. The effect is to open such files with the equivalent of O_DIRECT.

为合并排序临时文件禁用操作系统文件系统缓存。其效果类似使用O_DIRECT打开文件。

默认情况下,innodb_disable_sort_file_cache 的值为 OFF,表示排序文件缓存是启用的。这意味着 InnoDB 存储引擎会尝试在内存中缓存排序操作的临时文件数据。

如果将 innodb_disable_sort_file_cache 设置为ON,则表示禁用排序文件缓存。这将导致排序操作的临时文件直接写入磁盘,而不使用内存缓存。禁用排序文件缓存可能会增加磁盘 I/O 操作,但在某些情况下也可能对性能有所改进,特别是当排序操作使用的内存超过了可用的排序文件缓存大小时。

O_DIRECT 是一个文件打开标志(flag),在 Linux 系统中用于直接 I/O 操作。它告诉操作系统绕过文件系统缓存,直接在应用程序和磁盘之间进行数据传输。

总结

MySQL 8.0.28、8.0.32版本bug,当innodb_disable_sort_file_cache为ON时,无法在表上创建全文索引,错误提示:临时文件写入失败。 我们可以通过将innodb_disable_sort_file_cache设置为OFF,暂时规避这个问题。

更多有关全文索引内容,可查看笔者之前的文章:

mysql之全文索引二三事

mysql之全文索引二三事

参考:
https://bugs.mysql.com/bug.php?id=110557&thanks=4
https://dev.mysql.com/doc/refman/5.7/en/innodb-parameters.html

图片

点个“赞 or 在看” 你最好看!

喜欢,就关注我吧!

图片

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/787606.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

机器学习原理(1)集成学习基本方法

一.什么是集成学习 集成学习(ensemble learning)通过将多个学习器进行组合来完成学习任务。下图显示集成学习的一般结构(取自周志华老师的西瓜书),个体学习器通常由一种现有的学习算法从训练数据产生,例如…

Vue项目实战失物招领

经过两天的时间,搞定了一个Vue版本的项目,在这里留下这两天的点点滴滴,这个项目主要实现了失物招领的相关功能,比如发布丢失信息,发布拾到信息,跑腿信息,用户注册,用户登录等相关功能…

故障分析 | Kubernetes 故障诊断流程

一、本文概述及主要术语 1.1 概述 本文基于 Pod 、Service 和 Ingress 三大模块进行划分,对于 Kubernetes 日常可能出现的故障问题,提供了较为具体的排查步骤,并附上相关解决方法或参考文献。 1.2 主要术语 Pod: Kubernetes 中创建和管理的…

Spring Boot日志:SLF4J和Logback

日志的分类 SpringBoot中的日志库分为两种: 实现库:提供具体的日志实现,例如日志级别的控制、打印格式、输出目标等。外观库:自身不提供日志实现,而是对其他日志库进行封装,从而方便使用。基于外观模式实…

接口自动化测试-Python+Requests+Pytest+YAML+Allure配套撸码(详细)

目录:导读 前言一、Python编程入门到精通二、接口自动化项目实战三、Web自动化项目实战四、App自动化项目实战五、一线大厂简历六、测试开发DevOps体系七、常用自动化测试工具八、JMeter性能测试九、总结(尾部小惊喜) 前言 接口自动化框架&a…

软件测试/测试开发丨Pytest测试框架学习笔记

Pytest 参数化用例 测试登录场景 测试登录成功,登录失败(账号错误,密码错误)*创建多种账号: 中⽂文账号,英⽂文账号*普通测试用例方法Copy 多份代码 or 读⼊入参数?*一次性执⾏多个输⼊入参数* def test_param_login_ok():# 登录成功user…

解决分类任务中数据倾斜问题

大家好,在处理文本分类任务时,基准测试流行的自然语言处理架构的性能是建立对可用选项的理解的重要步骤。在这里,本文将深入探讨与分类相关的最常见的挑战之一——数据倾斜。如果你曾经将机器学习(ML)应用于真实世界的…

selenium---滑动框验证码破解

前言 目前常见的验证码有很多种,比如数字验证码,滑动验证码,以及滑动补全图像验证码等,关于验证码的操作属于我们在UI自动化很大的一个障碍,今天安静来介绍下如何通过python来实现我们滑动验证码 滑动验证码 先来一…

MySQL之全文索引二三事

全文索引 MySQL全文索引是一种用于快速搜索文本字符串的索引,在MySQL数据库中,它可以用来提高文本搜索的效率。全文索引不同于普通索引,普通索引只是对列值进行排序,而全文索引则会对列的内容进行分词,并且对每个分词…

RocketMQ重复消费的解决方案::分布式锁直击面试!

文章目录 场景分析方法的幂等分布式锁Redis实现分布式锁抢锁的设计思路 分布式锁案例 直击面试rocketmq什么时候重复消费消息丢失的问题消息在哪里丢失发送端确保发送成功并且配合失败的业务处理消费端确保消息不丢失rocketmq 主从同步刷盘 场景分析 分布式系统架构中,队列是分…

go-zero学习 第六章 分布式事务dtm

go-zero学习 第六章 分布式事务dtm 1 参考文档2 官方示例3 go-zero使用dtm参考代码3.1 go-zero支持dtm 代码操作步骤※3.2 gozerodtm 代码操作步骤 4 注意事项4.1 grpc接口地址※4.2 动态调用过程4.3 dtm的回滚补偿4.4 barrier的空补偿、悬挂等4.5 barrier在rpc中本地事务 1 参…

多媒体工作中用到的小工具

安利下嵌入式多媒体用到的各种小工具 下面是同事们推荐的 以下是对这些软件的简要介绍: ocenaudio:ocenaudio是一款跨平台的音频编辑软件,它提供了直观的界面和丰富的功能,可以帮助用户进行音频剪辑、修复、转码等操作。 MKVToolNix:MKVToolNix是一款开源的多媒体容器格…

web-vim信息泄露

(1)知识补充 vim 交换文件名 在使用vim时会创建临时缓存文件,关闭vim时缓存文件则会被删除,当vim异常退出后,因为未处理缓存文件,导致可以通过缓存文件恢复原始文件内容   以 index.php 为例&#xff1…

Redis一主二从三哨兵模式

文章目录 Redis一主二从三哨兵模式环境配置实践配置主从配置哨兵模式 测试主从复制测试模拟master宕机恢复master Redis一主二从三哨兵模式 当你使用Redis作为主从复制的架构,并且希望在出现主节点故障时自动进行故障转移时,适用于一主而从三哨兵模式。…

android 面试题目之handler消息机制

Handler消息机制是Android里面很基础的东西,基本上属于必考题 一般会从如下几个方面来考查 实现原理,Handler/Message/MessageQueue/Looper 几个类的实现流程,Handler导致的内存泄露怎么处理主线程的Looper是什么时候创建的;如果…

3. Spring 更简单的读取和存储对象(五大类注解 方法注解)

目录 1. 存储 Bean 对象 1.1 配置扫描路径 1.2 添加注解存储 Bean 对象 1.2.1 Controller(控制器存储) 1.2.2 Service(服务存储) 1.2.3 Repository(仓库存储) 1.2.4 Component(组件存储&…

C语言学习笔记 Ubuntu系统下部署gcc编译工具-01

在22.04版本 ubuntu系统下: 1.进行apt工具包更新 sudo apt-get update 2.安装gcc工具 sudo apt-get install -y gcc 3.创建一下文件,并编译它输出相应的内容 touch hello.c 4.使用gcc编译c源程序并运行 格式:gcc 源文件名 -o 生成的执行文…

AcWing 1210. 连号区间数

输入样例1: 4 3 2 4 1输出样例1: 7输入样例2: 5 3 4 2 5 1输出样例2: 9样例解释 第一个用例中,有 77 个连号区间分别是:[1,1],[1,2],[1,3],[1,4],[2,2],[3,3],[4,4][1,1],[1,2],[1,3],[1,4],[2,2],[3,3…

记一次vscode配置CMake编译task的坑

事情经过是这样的,博主在一个项目中需要使用交叉编译链进行项目编译,但是在CMake中有一个自定义的编译选项,在vscode中配置task任务后,编译发现终端报静态库.a文件格式错误,如下图所示: 但是如果在CMakeLis…

python与深度学习(七):CNN和fashion_mnist

目录 1. 说明2. fashion_mnist实战2.1 导入相关库2.2 加载数据2.3 数据预处理2.4 数据处理2.5 构建网络模型2.6 模型编译2.7 模型训练2.8 模型保存2.9 模型评价2.10 模型测试2.11 模型训练结果的可视化 3. fashion_mnist的CNN模型可视化结果图4. 完整代码 1. 说明 本篇文章是C…