DBA工作经验总结

news2024/11/17 10:52:58

目录

一、MySQL8.0创建一张规范的表

1.表、字段全采用小写

2.int类型不再加上最大显示宽度

3.每张表必须显式定义自增int类型的主键

4.建表时增加comment来描述字段和表的含义（防止以后忘记）

5.建议包含create_time和update_time字段

6.核心业务增加记录标记字段

7.用尽量少的存储空间来存储一个字段的数据

8.存储精确浮点数必须使用DECIMAL

9.尽量能不使用TEXT、BLOB类型

10.添加合适的索引增加查询速度

11.字符集建议使用utf8mb4

12.存储引擎建议使用InnoDB

13.但表字段数目建议小于30

二、MySQL8.0需要调整的参数

1.缓冲池大小和数量

2.最大连接客户端数（默认151，通常不够用）

3.Binlog相关参数

4.数据目录

5.服务ID

6.只读参数

7.双一参数

8.开启GTID

9.采用独立表空间

10.不区分大小写

11.IO操作数

12.重做日志相关

13.慢查询相关参数

14.连接超时参数

15.事务隔离级别

16.InnoDB行锁等待时间

17.死锁信息记录在错误日志里

一、MySQL8.0创建一张规范的表

例：

CREATE TABLE student_info (
`id` INT  NOT NULL AUTO_INCREMENT COMMENT '主键',
`stu_name` VARCHAR(10) NOT NULL DEFAULT '' COMMENT '姓名',
`stu_class` VARCHAR(10) NOT NULL DEFAULT '' COMMENT '班级',
`stu_num` INT NOT NULL DEFAULT '0' COMMENT '学号',
`stu_score` SMALLINT UNSIGNED NOT NULL DEFAULT '0' COMMENT '总分',
`tuition` DECIMAL(5, 2) NOT NULL DEFAULT '0' COMMENT '学费',
`phone_number` VARCHAR(20) NOT NULL DEFAULT '0' COMMENT '电话号码',
`create_time` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '记录创建时间',
`update_time` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '记录更新时间',
`status` TINYINT NOT NULL DEFAULT '1' COMMENT '1代表记录有效，0代表记录无效',
PRIMARY KEY (`id`),
UNIQUE KEY uniq_stu_num (`stu_num`),
KEY idx_stu_score (`stu_score`),
KEY idx_update_time_tuition (`update_time`, `tuition`)
) ENGINE = INNODB charset = utf8mb4 COMMENT '学生信息表';
1.表、字段全采用小写

https://img1.sycdn.imooc.com/climg/65fe44d60938d19c07800178.jpg

（0 区分大小写，1 不区分大小写）

2.int类型不再加上最大显示宽度

https://img1.sycdn.imooc.com/climg/65fe460209e6e6ba11730449.jpg

3.每张表必须显式定义自增int类型的主键

如果innodb没有显示定义主键，可能会选择唯一索引作为主键，唯一索引在写入的过程可能不是递增的，写入数据时可能会导致数据页频繁分裂，从而导致写入效率低和页空间浪费。另外主键能保证每一行的唯一性，在日常使用也会很方便，提升查询效率、归档处理。

4.建表时增加comment来描述字段和表的含义（防止以后忘记）

https://img1.sycdn.imooc.com/climg/65fe47b709f7486b13830406.jpg

5.建议包含create_time和update_time字段

用于审计和跟踪，方便查看创建更新、时间，分析问题方便。

数据归档也可以根据这两个字段处理。

6.核心业务增加记录标记字段

https://img1.sycdn.imooc.com/climg/65fe493009937e2513630410.jpg

7.用尽量少的存储空间来存储一个字段的数据

例：能用int就不varchar/char, 能用tinyint就不用int.

8.存储精确浮点数必须使用DECIMAL
9.尽量能不使用TEXT、BLOB类型

浪费磁盘空间，影响性能

如果某一个字段必须使用，建议单独建一张表

10.添加合适的索引增加查询速度
11.字符集建议使用utf8mb4

如果应用程序使用多种语言，使用utf8mb4可以防止乱码，支持多种语言

12.存储引擎建议使用InnoDB

绝大多数情况使用：​主持事务、行锁、在线备份、支持MVCC多版本并发控制

13.但表字段数目建议小于30

列越多，越影响性能，结构变得越复杂，不利于维护和管理

二、MySQL8.0需要调整的参数

###配置文件举例
[client]
port        = 3306
socket      = /tmp/mysql.sock

[mysqld]
port    = 3306
socket  = /tmp/mysql.sock

##  dir set
datadir           = /data/mysql/data
innodb_data_home_dir   = /data/mysql/data
innodb_log_group_home_dir = /data/mysql/data
log-bin           = /data/mysql/binlog/mysql-bin
max_binlog_size   = 1G

log_bin_index             = /data/mysql/binlog/mysql-bin.index  
relay-log         = /data/mysql/binlog/mysql-relay-bin
tmpdir            = /data/mysql/tmpdir
slow_query_log_file   = /data/mysql/log/mysql-slow.log
general_log_file   = /data/mysql/log/mysql-general.log
log-error         = /data/mysql/log/mysql.err

## slave and binlog
server_id = 6666             
skip-slave-start = 0       
read_only = 0          
binlog_format = row             
log_slave_updates = 1
master_info_repository = table
relay_log_info_repository = table
relay_log_purge = 1
relay_log_recovery = 1
sync_binlog = 100                 

binlog_cache_size = 1M
binlog_expire_logs_seconds = 2592000
log_bin_trust_function_creators = 1         
slave_net_timeout=60                
#binlog_error_action="IGNORE_ERROR"     

innodb_autoinc_lock_mode=1          

## 
back_log = 200
bulk_insert_buffer_size = 8M            
#character-set-server = utf8
lower_case_table_names = 1              

## 基线
local-infile = off
skip-networking = off
skip-name-resolve = on 

## connect
max_allowed_packet = 32M
max_connect_errors = 1000
max_connections = 1000
wait_timeout = 3600            
interactive_timeout = 3600          

table_open_cache = 4096
thread_cache_size =  64
thread_stack = 192K
transaction_isolation = REPEATABLE-READ     # 
pid-file = mysql.pid

## slow
slow_query_log = 1              
long_query_time = 1
log_slow_admin_statements
log_queries_not_using_indexes = 0
slow_launch_time = 1
read_buffer_size = 4M               
read_rnd_buffer_size = 8M           
sort_buffer_size = 8M
join_buffer_size = 32M
tmp_table_size = 128M
max_heap_table_size = 128M

default_storage_engine = innodb
explicit_defaults_for_timestamp = on           

## innodb
innodb_buffer_pool_size = 1G                   
innodb_max_dirty_pages_pct = 80         
innodb_thread_concurrency = 8           
innodb_buffer_pool_instances = 2        
innodb_flush_log_at_trx_commit = 2      
innodb_read_io_threads = 8          
innodb_write_io_threads = 4         
innodb_io_capacity = 1000
innodb_io_capacity_max = 2000
innodb_lru_scan_depth = 1024
innodb_use_native_aio = 1
innodb_flush_neighbors = 1
innodb_buffer_pool_load_at_startup = 1
innodb_buffer_pool_dump_at_shutdown = 1

innodb_data_file_path=ibdata:1G:autoextend
innodb_log_files_in_group = 3
innodb_log_file_size = 2G
innodb_file_per_table = 1 

innodb_flush_method = O_DIRECT
innodb_strict_mode = 1
innodb_lock_wait_timeout = 30
innodb_log_buffer_size = 16M
innodb_adaptive_flushing = 1
innodb_change_buffering = all
innodb_purge_threads = 4            
innodb_purge_batch_size = 300           

innodb_old_blocks_time = 1
innodb_fast_shutdown = 0
performance_schema = 1
innodb_print_all_deadlocks = 1
innodb_sort_buffer_size = 4M 

innodb_page_size = 16k
gtid_mode=on
enforce_gtid_consistency=on     

table_open_cache_instances=16
binlog_rows_query_log_events=1      


## pasword
default_password_lifetime=0 

[mysqldump]
quick
max_allowed_packet = 32M

[mysql]
no-auto-rehash
prompt=\p@\d>\_

[mysqld_safe]
open-files-limit = 28192

[mysqlhotcopy]
interactive-timeout
1.缓冲池大小和数量

innodb_buffer_pool_size = 1G  在机器内存的60%~80%

需要留一部分内存给系统。

2.最大连接客户端数（默认151，通常不够用）

max_connections = 1000

3.Binlog相关参数

bin_log路径

https://img1.sycdn.imooc.com/climg/65fe7f7c09d7995108060296.jpg

binlog_format = row   行模式

binlog_expire_logs_seconds = 2592000      (30天自动清除）

log_slave_updates = 1     ​主从库开启复制，建议全部开启

4.数据目录

配置单独的数据盘，提高查询效率

https://img1.sycdn.imooc.com/climg/65fe80b509ce0d3d08050313.jpg

5.服务ID

server_id =     ​    ​(    ​    ​建议设备IP后两段，防止同一机房ID冲突）

https://img1.sycdn.imooc.com/climg/65fe80d4091dee1904040097.jpg

6.只读参数

read_only = 0     (一般主库关闭0，从库开启1）

https://img1.sycdn.imooc.com/climg/65fe815e09888aa004530135.jpg

7.双一参数

sync_binlog = 100   执行100个事务再落盘  (一致性要求高就减小数值）

8.开启GTID

https://img1.sycdn.imooc.com/climg/65fe8256095c41cd03650090.jpg

9.采用独立表空间

https://img1.sycdn.imooc.com/climg/65fe82ae092d0c0204140080.jpg

10.不区分大小写

https://img1.sycdn.imooc.com/climg/65fe82c20950488604020046.jpg

11.IO操作数

https://img1.sycdn.imooc.com/climg/65fe82df09037f1604120070.jpg

12.重做日志相关

https://img1.sycdn.imooc.com/climg/65fe83150917fa9605670122.jpg

13.慢查询相关参数

https://img1.sycdn.imooc.com/climg/65fe836509bb633004450082.jpg

https://img1.sycdn.imooc.com/climg/65fe836c096e408a07110070.jpg

14.连接超时参数

https://img1.sycdn.imooc.com/climg/65fe839f09c555eb03810070.jpg

15.事务隔离级别

https://img1.sycdn.imooc.com/climg/65fe83f00908dcdd05960066.jpg

16.InnoDB行锁等待时间

https://img1.sycdn.imooc.com/climg/65fe846b094d619f04100076.jpg

17.死锁信息记录在错误日志里

https://img1.sycdn.imooc.com/climg/65fe84aa0968ba6204440066.jpg

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1541997.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

[激光原理与应用-80]：PLC通信协议之-OMRON欧姆龙FINS TCP通信协议详细解析

[激光原理与应用-80]：PLC通信协议之-OMRON欧姆龙FINS TCP通信协议详细解析

目录 一、OMRON欧姆龙 PLC简介 1.1 OMRON欧姆龙 PLC 1.2 OMRON欧姆龙 PLC通信协议简介 1.3 通信架构 二、欧姆龙FINS协议简介 2.1 简介 2.2 协议分层 2.3 OMRON（欧姆龙）FINS协议的本质 2.4 OMRON（欧姆龙）FINS&#xff08…
阅读更多...
sentinel中StatisticSlot数据采集的原理

sentinel中StatisticSlot数据采集的原理

StatisticSlot数据采集的原理 时间窗口 固定窗口 在固定的时间窗口内，可以允许固定数量的请求进入；超过数量就拒绝或者排队，等下一个时间段进入, 如下图 时间窗长度划分为1秒 单个时间窗的请求阈值为3 上述存在一个问题, 假如9:18:04:…
阅读更多...
【ArcGIS微课1000例】0106：ArcGIS制作风向频率(风速)玫瑰图

【ArcGIS微课1000例】0106：ArcGIS制作风向频率(风速)玫瑰图

文章目录 一、效果预览二、加载数据三、创建图表四、图表修饰五、保存图片一、效果预览 在ArcGIS制作的风向频率玫瑰图最终效果如下所示： 二、加载数据 加载配套实验数据包中0106.rar中的excel数据，然后右键→打开。 三、创建图表 1. 创建图表。右击打开属性表，选择表选项…
阅读更多...
ETL数据倾斜与资源优化

ETL数据倾斜与资源优化

1.数据倾斜实例 数据倾斜在MapReduce编程模型中比较常见，由于key值分布不均，大量的相同key被存储分配到一个分区里，出现只有少量的机器在计算，其他机器等待的情况。主要分为JOIN数据倾斜和GROUP BY数据倾斜。 1.1GROUP BY数据倾…
阅读更多...
Web前端—浏览器渲染原理

Web前端—浏览器渲染原理

浏览器渲染原理 浏览器渲染原理渲染时间点渲染流水线1. 解析HTML—Parse HTML2. 样式计算—Recalculate Style3. 布局—Layout4. 分层—Layer5. 绘制—Paint6. 分块—Tiling7. 光栅化—Raster8. 画—Draw完整过程 面试题1. 浏览器是如何渲染页面的？2. 什么是 reflow…
阅读更多...
6.3 BP神经网络

6.3 BP神经网络

在多层感知器被引入的同时，也引入了一个新的问题：由于隐藏层的预期输出并没有在训练样例中给出，隐藏层结点的误差无法像单层感知器那样直接计算得到。 为了解决这个问题，反向传播（BP）算法被引入&#xff0…
阅读更多...
Spark DAG

Spark DAG

Spark DAG 什么是DAG DAG 是一组顶点和边的组合。顶点代表了 RDD， 边代表了对 RDD 的一系列操作。 DAG Scheduler 会根据 RDD 的 transformation 动作，将 DAG 分为不同的 stage，每个 stage 中分为多个 task，这些 task 可以并行运…
阅读更多...
jenkins介绍，帮助你从安装到使用jenkins

jenkins介绍，帮助你从安装到使用jenkins

Jenkins 概述 官网地址：https://www.jenkins.io/zh/ 什么是 Jenkins Jenkins是一款开源 CI&CD 软件，用于自动化各种任务，包括构建、测试和部署软件。它提供了一个易于使用的图形化界面，可以通过配置简单的任务来实现自动化构…
阅读更多...
ubuntu20.04安装 ffmpeg 开发环境

ubuntu20.04安装 ffmpeg 开发环境

参考：参考1 一些相关软件包，已打包整理好，如下 源码包 1、安装步骤 创建安装目录 sudo mkdir -p /usr/local/ffmpeg/lib 解压源码 tar -jxf ffmpeg-4.3.2.tar.bz2 到指定ffmpeg目录进行配置 cd ffmpeg-4.3.2/ 配置：会报错很多…
阅读更多...
简单使用Swagger

简单使用Swagger

文章目录 1、介绍2、 使用步骤3、 常用注解 1、介绍 Swagger 是一个规范和完整的框架，用于生成、描述、调用和可视化 RESTful 风格的 Web 服务(https://swagger.io/)。 它的主要作用是： 使得前后端分离开发更加方便，有利于团队协作 接口的文…
阅读更多...
银行监管报送系统介绍（五）：金融统计数据大集中自动化报送系统——PBOC Report

银行监管报送系统介绍（五）：金融统计数据大集中自动化报送系统——PBOC Report

人民银行金融统计数据大集中自动化报送系统（简称PBOC Report），是基于现代计算机网络技术应用基础上，由人行总行设置金融统计数据服务器，建立的一个全国统一的金融统计数据库。 人行针对各银行存贷款、中间业务、网点人…
阅读更多...
关闭 Microsoft Word 2010 配置窗口

关闭 Microsoft Word 2010 配置窗口

关闭 Microsoft Word 2010 配置窗口 References 出现这种问题，主要是安装时所用账户和目前登陆的账户不为同一个账户造成的。或者你进行过覆盖安装或是重新安装过系统，但是 office 的安装目录没有更改。先激活 Microsoft Office，然后执行下列…
阅读更多...
如何使用OpenCV扫描图像、查找表和时间测量

如何使用OpenCV扫描图像、查找表和时间测量

返回：OpenCV系列文章目录（持续更新中......） 上一篇：OpenCV4.9.0开源计算机视觉库核心功能（核心模块） ​ 编辑 目标 我们将寻求以下问题的答案： 如何浏览图像的每个像素？OpenCV 矩…
阅读更多...
【前端Vue】HR-saas中台项目开发md文档第1篇：vuex基础-介绍,vuex基础-初始化功能【附代码文档】

【前端Vue】HR-saas中台项目开发md文档第1篇：vuex基础-介绍,vuex基础-初始化功能【附代码文档】

HR-saas中台管理项目开发完整教程（附代码资料）主要内容讲述：vuex基础-介绍,vuex基础-初始化功能,vuex基础-state,vuex基础-mutations,vuex基础-actions,vuex基础-getters。项目课设计，人力资源的环境搭建vue-element-admin的了解和…
阅读更多...
微服务篇-C 深入理解第一代微服务（SpringCloud）_V 深入理解Config分布式配置中心

微服务篇-C 深入理解第一代微服务（SpringCloud）_V 深入理解Config分布式配置中心

原创作者：田超凡（程序员田宝宝） 版权所有，引用请注明原作者，严禁复制转载 Part 1 理论部分 1 什么是SpringCloud Config？ 当一个系统中的配置文件发生改变的时候，我们需要重新启动该服务&am…
阅读更多...
信号处理--基于FBCSP滤波方法的运动想象分类

信号处理--基于FBCSP滤波方法的运动想象分类

目录 理论 工具 方法 代码获取 理论 通用空间模式 (CSP) 算法可以用来有效构建最佳空间滤波器区分，然后实现运动想象的数据中的脑电信号的区分。然而，空间滤波器性能的好坏主要取决于其工作频带。如果脑电信号没有经过滤波或者滤波的频带范围不合适…
阅读更多...
贝尔曼最优方程【BOE】

贝尔曼最优方程【BOE】

强化学习笔记 主要基于b站西湖大学赵世钰老师的【强化学习的数学原理】课程，个人觉得赵老师的课件深入浅出，很适合入门. 第一章 强化学习基本概念 第二章 贝尔曼方程 第三章 贝尔曼最优方程 文章目录 强化学习笔记一、最优策略二、贝尔曼最优方程(BOE)三…
阅读更多...
边缘计算【智能+安全检测】系列教程-- Jeton Agx Orin 基础环境搭建

边缘计算【智能+安全检测】系列教程-- Jeton Agx Orin 基础环境搭建

1 .前期准备 Jetson Agx Orin 比Jetson Agx Orin Xavier的算力要高，性能要好通常用来做自动驾驶的AI推理，具体外观如下图 1.刷机软件sdkmanager：下载链接 NVIDIA账号需要注册，正常一步一步往下走就行。在ubuntu18以上的系统安…
阅读更多...
每日一题 --- 两两交换链表中的节点[力扣][Go]

每日一题 --- 两两交换链表中的节点[力扣][Go]

两两交换链表中的节点 题目：24. 两两交换链表中的节点 给你一个链表，两两交换其中相邻的节点，并返回交换后链表的头节点。你必须在不修改节点内部的值的情况下完成本题（即，只能进行节点交换）。 示例 1&a…
阅读更多...
图解Kafka架构学习笔记（三）

图解Kafka架构学习笔记（三）

准备Kafka环境 这里推荐使用Docker Compose快速搭建一套本地开发环境。 以下docker-compose.yml文件用来搭建一套单节点zookeeper和单节点kafka环境，并且在8080端口提供kafka-ui管理界面。 version: 2.1services:zoo1:image: confluentinc/cp-zookeeper:7.3.2hos…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023