Mysqld的关键优化参数

news2024/9/22 13:28:00

skip-name-resolve

现象

mysql连接很慢，登陆到服务器上查看服务器日志都是正常的，无可疑记录，登陆到mysql服务器上，查看下进程，发现有很多这样的连接：
218 | unauthenticated user | 192.168.10.6:44500 | NULL  | Connect | NULL | login | NULL
219 | unauthenticated user | 192.168.10.6:44501 | NULL  | Connect | NULL | login | NULL  
 

原因是由于mysql对连接的客户端进行DNS反向解析。

有2种解决办法：
1，把client的ip写在mysql服务器的/etc/hosts文件里，随便给个名字就可以了。
2，在 my.cnf 中加入 skip_name_resolve=on

mysql是这样来处理客户端解析过程

  • mysql-client向mysqld发起连接请求；
  • mysqld创建子线程来处理该连接请求；
  • 子线程首先去检查主机名是否存在于performance_schema.host_cache表中；
  • 如果是，则进入权限验证阶段；
  • 如果否，那么会尝试解析将IP地址解析为主机名；
  • 然后再将主机名解析为IP地址；
  • 将解析到的结果和原始IP地址进行比较；
  • 如果相同则添加到host_cache中然后进行权限验证;
  • 如果不相同，那么返回报错
  • 注：只有非本地主机的 TCP 连接会使用主机缓存；使用网络回环地址或 socket 建立的连接不会使用主机缓存
     

所谓反向解析是这样的

mysql接收到连接请求后，获得的是客户端的ip，为了更好的匹配mysql.user里的权限记录（某些是用hostname定义的）。
如果mysql服务器设置了dns服务器，并且客户端ip在dns上并没有相应的hostname，那么这个过程很慢，导致连接等待。

添加skip-name-resolve以后就跳过着一个过程了。

How MySQL
uses DNS When a new thread connects to mysqld, mysqld will
spawn a new thread to handle the request. This thread will first check
if the hostname is in the hostname cache. If not the thread will call
gethostbyaddr_r() and gethostbyname_r() to resolve the hostname. If
the operating system doesn’t support the above thread-safe calls, the
thread will lock a mutex and call gethostbyaddr() and gethostbyname()
instead. Note that in this case no other thread can resolve other
hostnames that is not in the hostname cache until the first thread is
ready. You can disable DNS host lookup by starting mysqld with
–skip-name-resolve. In this case you can however only use IP names in
the MySQL privilege tables. If you have a very slow DNS and many
hosts, you can get more performance by either disabling DNS lookop
with –skip-name-resolve or by increasing the HOST_CACHE_SIZE define
(default: 128) and recompile mysqld. You can disable the hostname
cache with –skip-host-cache. You can clear the hostname cache with
FLUSH HOSTS or mysqladmin flush-hosts. If you don’t want to allow
connections over TCP/IP, you can do this by starting mysqld with
–skip-networking.
 

根据文档说明，如果你的mysql主机查询DNS很慢或是有很多客户端主机时会导致连接很慢，由于我们的开发机器是不能够连接外网的，所以DNS解析是不可能完成的，从而也就明白了为什么连接那么慢了。同时，请注意在增加该配置参数后，mysql的授权表中的host字段就不能够使用域名而只能够使用 ip地址了，因为这是禁止了域名解析的结果。

skip-host-cache

主机缓存的作用

  • 通过缓存 IP 到主机名查找的结果，可以避免每次客户端进行连接时都去寻找DNS进行解析，所能缓存条目的数量受 host_cache_size 控制。
  • 缓存中包含客户端连接过程中发生的错误信息。如果同一主机连续多次连接错误，那么将阻止该主机的进一步连接，该行为受 max_connect_errors 控制。
     
参数 host_cache_size与skip-host-cache和skip_name_resolve 的作用
  • host_cache_size：控制主机缓存的数量，设置为0时，禁用主机缓存，每次服务器连接时，服务器都会进行DNS查找，相比skip-host-cache来说，host_cache_size更加灵活，可以随时变更或禁用。
  • skip-host-cache：作用类似于host_cache_size，但mysql在运行时无法对该参数进行变更，并且skip-host-cache在之后的版本中已弃用。
  • skip_name_resolve：检查客户端连接时是否解析主机名，变量为off，则mysqld 会在检查客户端连接时解析主机名。若变量为on，mysqld 只使用 IP ;在这种情况下，授权表中的所有列值都必须是 IP地址
     

read_buffer_size

read_buffer_size参数用于控制每次从MySQL服务器读取数据时使用的缓冲区大小，单位为字节，默认值为 1MB。

线上配置参考

[client]
port = 3306
socket=/var/lib/mysql/mysql.sock

[mysqld]
########basic settings########
server-id = 11 
port = 3306
user = mysql
bind_address = 0.0.0.0
autocommit = 1
character_set_server=utf8
skip_name_resolve = 1
log_bin_trust_function_creators = 1
max_connections = 800
max_connect_errors = 1000
datadir = /data/mysql/data
transaction_isolation = READ-COMMITTED
explicit_defaults_for_timestamp = 1
join_buffer_size = 134217728
tmp_table_size = 67108864
tmpdir = /data/mysql/tmp/
max_allowed_packet = 16777216
sql_mode = "STRICT_TRANS_TABLES,NO_ENGINE_SUBSTITUTION,NO_ZERO_DATE,NO_ZERO_IN_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_AUTO_CREATE_USER"
interactive_timeout = 1800
wait_timeout = 1800
read_buffer_size = 16777216
read_rnd_buffer_size = 33554432
sort_buffer_size = 33554432
########log settings########
log_error = error.log
slow_query_log = 1
slow_query_log_file = /data/mysql/logs/slow/slow.log
log_queries_not_using_indexes = 1
log_slow_admin_statements = 1
log_slow_slave_statements = 1
log_throttle_queries_not_using_indexes = 10
expire_logs_days = 90
long_query_time = 2
min_examined_row_limit = 100
########replication settings########
master_info_repository = TABLE
relay_log_info_repository = TABLE
log_bin = /data/mysql/logs/bin_log/bin.log
sync_binlog = 1
gtid_mode = on
enforce_gtid_consistency = 1
log_slave_updates
binlog_format = row 
relay_log = relay.log
relay_log_recovery = 1
binlog_gtid_simple_recovery = 1
slave_skip_errors = ddl_exist_errors
########innodb settings########
innodb_page_size = 8192
innodb_buffer_pool_size = 12G
innodb_buffer_pool_instances = 8
innodb_buffer_pool_load_at_startup = 1
innodb_buffer_pool_dump_at_shutdown = 1
innodb_lru_scan_depth = 2000
innodb_lock_wait_timeout = 5
innodb_io_capacity = 4000
innodb_io_capacity_max = 8000
innodb_flush_method = O_DIRECT
innodb_file_format = Barracuda
innodb_file_format_max = Barracuda
#innodb_log_group_home_dir = /redolog/
#innodb_undo_directory = /undolog/
innodb_undo_logs = 128
innodb_undo_tablespaces = 3
innodb_flush_neighbors = 1
innodb_log_file_size = 4G
innodb_log_buffer_size = 16777216
innodb_purge_threads = 4
innodb_large_prefix = 1
innodb_thread_concurrency = 64
innodb_print_all_deadlocks = 1
innodb_strict_mode = 1
innodb_sort_buffer_size = 67108864 
########semi sync replication settings########
plugin_load = "rpl_semi_sync_master=semisync_master.so;rpl_semi_sync_slave=semisync_slave.so"
loose_rpl_semi_sync_master_enabled = 1
loose_rpl_semi_sync_slave_enabled = 1
loose_rpl_semi_sync_master_timeout = 5000

[mysqld-5.7]
innodb_buffer_pool_dump_pct = 40
innodb_page_cleaners = 4
innodb_undo_log_truncate = 1
innodb_max_undo_log_size = 2G
innodb_purge_rseg_truncate_frequency = 128
binlog_gtid_simple_recovery=1
log_timestamps=system
transaction_write_set_extraction=MURMUR32
show_compatibility_56=on

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1360605.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

vue简单实现滚动条

vue简单实现滚动条

背景：产品提了一个需求在一个详情页，一个form表单元素太多了，需要滚动到最下面才能点击提交按钮，很不方便。他的方案是，加一个滚动条，这样可以直接拉到最下面。 优化：1、支持滚动条，…
阅读更多...
宏基因组序列分析工具EukRep

宏基因组序列分析工具EukRep

文章：Genome-reconstruction for eukaryotes from complex natural microbial communities | bioRxiv 仓库：patrickwest/EukRep: Classification of Eukaryotic and Prokaryotic sequences from metagenomic datasets (github.com) 推荐使用conda进行安…
阅读更多...
机械配件移动商城课程概述

机械配件移动商城课程概述

项目介绍 开发准备 任务 开源库介绍 框架搭建 工具类
阅读更多...
C++-异常处理

C++-异常处理

1、概念 异常时程序在执行期间产生的问题。C异常是指在程序运行时发生的特殊情况。比如string::at函数下标越界等。 异常提供了一种转移程序控制权的方式。 一旦程序出现异常没有经过处理，就会造成程序运行崩溃。 处理异常的方式有：抛出异常（…
阅读更多...
算法每日一题：队列中可以看到的人数 | 单调栈

算法每日一题：队列中可以看到的人数 | 单调栈

大家好，我是星恒 今天是一道困难题，他的题解比较好理解，但是不好想出来，接下来就让我带大家来捋一捋这道题的思路，以及他有什么特征 题目：leetcode 1944有 n 个人排成一个队列，从左到右 编号为 …
阅读更多...
【面试高频算法解析】算法练习6 广度优先搜索

【面试高频算法解析】算法练习6 广度优先搜索

前言 本专栏旨在通过分类学习算法，使您能够牢固掌握不同算法的理论要点。通过策略性地练习精选的经典题目，帮助您深度理解每种算法，避免出现刷了很多算法题，还是一知半解的状态 专栏导航 二分查找回溯（Backtracking&…
阅读更多...
使用Python给图片加水印（通过OpenCV和Pillow实现，内含完整代码链接）

使用Python给图片加水印（通过OpenCV和Pillow实现，内含完整代码链接）

from PIL import Image, ImageFont, ImageDraw, ImageEnhance, ImageChops import cv2 import math import numpy as npdef crop_image(im):"""裁剪图片边缘空白"""bg Image.new(mode"RGBA", sizeim.size)bbox ImageChops.differenc…
阅读更多...
vite + vue3引入ant design vue 报错

vite + vue3引入ant design vue 报错

npm install ant-design-vue --save下载插件并在main.ts 全局引入 报错 解决办法一： main.ts注释掉全局引入 模块按需引入 解决办法二 将package.json中的ant-design-vue的版本^4.0.0-rc.4改为 ^3.2.15版本 同时将将package-lock.json中的ant-design-vue的版本…
阅读更多...
打造私域流量的知识付费小程序saas租户平台

打造私域流量的知识付费小程序saas租户平台

当今信息爆炸的时代，知识管理已经成为了每个人必须面对的问题。然而，市面上的知识付费平台大多数都是通用的，无法满足个性化需求。 因此，明理信息科技提供了一款专属定制的适合个人的知识付费平台。核心产品能力如下：…
阅读更多...
Huggy Lingo: 利用机器学习改进 Hugging Face Hub 上的语言元数据

Huggy Lingo: 利用机器学习改进 Hugging Face Hub 上的语言元数据

太长不看版: Hub 上有不少数据集没有语言元数据，我们用机器学习来检测其语言，并使用 librarian-bots 自动向这些数据集提 PR 以添加其语言元数据。 Hugging Face Hub 已成为社区共享机器学习模型、数据集以及应用的存储库。随着 Hub 上的数据集越来越多&…
阅读更多...
git打tag以及拉取tag

git打tag以及拉取tag

场景：某次git代码发布后定版记录，将发版所在的commit时候代码打上tag记录，方便后期切换到对应tag代码位置。 查看所有tag名 git tag// 1.1.0 // 1.0.0查看tag和描述 git tag -l -n//1.0.0 云监管一期项目完结 //1.1.0 …
阅读更多...
tcl 基础

tcl 基础

exec catch file mkdir
阅读更多...
使用爬虫爬取热门电影

使用爬虫爬取热门电影

文章目录 网站存储视频的原理M3U8文件解读网站分析代码实现 网站存储视频的原理 首先我们来了解一下网站存储视频的原理。 一般情况下&#xff0c;一个网页里想要显示出一个视频资源&#xff0c;必须有一个<video>标签&#xff0c; <video src"xxx.mp4"&…
阅读更多...
第8课 将推流端与播放端合并为一对一音视频聊天功能

第8课 将推流端与播放端合并为一对一音视频聊天功能

在第二章的第7课&#xff0c;我们实现了一个推流端&#xff0c;可以把音视频推送到rtmp服务器&#xff1b;在第一章的第4课&#xff0c;我们实现了一个播放器&#xff0c;可以正常播放rtmp音视频流。聪明的你应该可以想到了&#xff1a;把推流端和播放端合并在一起&#xff0c;…
阅读更多...
求实创新 不断探索 浙江移动基于亚信科技AntDB数据库率先完成CRM系统全域改造

求实创新 不断探索 浙江移动基于亚信科技AntDB数据库率先完成CRM系统全域改造

12日20日&#xff0c;中国信息通信研究院&#xff08;简称&#xff1a;信通院&#xff09;和中国通信标准化协会大数据库技术推进委员会&#xff08;CCSA TC601&#xff09;共同组织的2023年大数据库“星河&#xff08;Galaxy&#xff09;”案例评选结果发布。中国移动通信集团…
阅读更多...
2024年天津体育学院专升本专业考试考生入场及考前须知

2024年天津体育学院专升本专业考试考生入场及考前须知

天津体育学院2024年高职升本科招生专业考试考生考前须知 一、考生入场及考试要求 1.考生于1月6日笔试考试当天&#xff0c;根据考试时间提前30分钟到达天津体育学院新校区东门&#xff0c;凭专业考试准考证、有效身份证原件&#xff0c;经查验合格后方可允许进入学校。 2.笔…
阅读更多...
Java反射篇----第二篇

Java反射篇----第二篇

系列文章目录 文章目录 系列文章目录前言一、实现Java反射的类：二、反射机制的优缺点：三、Java 反射 API前言 前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。点击跳转到网站，这篇文章男女通用，看懂了就去分享给你的码吧。 一、实现…
阅读更多...
Centos服务器安装Certbot以webroot的方式定时申请SSL免费证书

Centos服务器安装Certbot以webroot的方式定时申请SSL免费证书

最近发现原先免费一年的SSL证书都改为3个月的有效期了&#xff0c;原先一年操作一次还能接受&#xff0c;现在3个月就要手动续期整的太慢烦了&#xff0c;还是让程序自动给处理下吧&#xff0c; 安装 Certbot yum install epel-release -y yum install certbot -yEPEL是由 Fe…
阅读更多...
海盗传说^^

海盗传说^^

欢迎来到程序小院 海盗传说 玩法&#xff1a;海盗版俄罗斯方块&#xff0c;上键 ↑变换、 左键 ← 左移、右键 → 右移、下键 ↓ 加速, 快去玩海盗版俄罗斯方块吧^^。开始游戏https://www.ormcc.com/play/gameStart/240 html <canvas id"canvas" moz-opaque>&…
阅读更多...
Scrum的工件

Scrum的工件

我们采用了Scrum进行开发方面的管理&#xff0c;那么所有的计划和工作都应该是透明的&#xff0c;这给了我们检查这些东西的机会&#xff0c;以便能够即时做出调整来适应即将发生的变化。 那么Scrum为我们设计了一些工件帮助我们检查我们的工作和计划&#xff0c;每个工件都有…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023