设计数据库之外部模式:数据库的应用

news2024/11/19 6:39:11

Chapter5:设计数据库之外部模式:数据库的应用

笔记来源:《漫画数据库》—科学出版社

设计数据库的步骤:
概念模式

概念模式(conceptual schema)是指将现实世界模型化的阶段进而,是确定数据库理论结构的阶段。
概念模式的设计是通过E-R模型把握现实世界,进而规范化表格来实现的。

内部模式

内部模式是从计算机内部看到的数据库,是确定数据库物理构造的阶段。
内部模式的设计通过设计数据库高速检索方法来实现。

外部模式

外部模式是从用户和应用的角度来观察的数据库。
外部模式的设计是通过设计应用程序所必要的数据来实现的。

5.1 基础概念

什么是事务?
用户的一个连贯操作我们称之为数据库事务(Transaction)

读取数据作业和加法写入作业统归为一个事务
A进行的操作为一个事务,B进行的操作也是一个事务。

事务的性质

提交
各种事务的操作正确完成时,要确认对数据库
的处理,这个确认处理过程我们称之为“提交”(commit)。

什么是锁?
为了使多个用户同时访问数据库时不会发生问题,自然要控制这些操作。控制的方法我们通常称之为“锁”(LOCK)

A在进行自己的一系列操作前先上锁的话,B即便是想进行操作也要等到A的操作完成之后才能开始。

锁的粒度(加锁的范围)

不过,虽然使用了锁,但由于数据库是多人共享数据,非常频繁上锁是不太好的。通常会根据情况分开使用锁。

共享锁
用户仅进行读取操作时,使用共享锁
上共享锁期间,其他用户能够读取数据,但是不能写入。
独占锁
用户想要进行写入操作时,就上独占锁。上独占锁时,其他用户既不能读取也不能
写入。

使用锁控制多个事务我们称之为同时执行控制
通过锁来控制操作进程,是为了同时执行多个事务。但是,使用锁来进行同时执行控制,存在管理锁的负担。另外,还有可能出现死锁的现象。
那么,在事务数很少的情况下或读取行为多的情况下,可以使用更为简洁的方法进行同时执行控制。这种方法有以下几种控制方式。

时间戳控制(Timestamp control)
数据库事务给每一个被访问的数据打上了一个“时间戳”的时间印记。
时间戳控制法是指某个事务要读写这个数据时,比这个事务拥有更早时间戳的事务更新了数据的情况下,不允许读写数据的方法。不许读写的情况下,回滚此事务。
乐观控制(Optimistic control)
是一种暂时允许各事务读取的处理方法。从写入点开始,确认是否由其他的事务更新了数据。若其他事务更新了数据,则回滚。

什么是回滚?
A给苹果数据上了独占锁,同时B给草莓数据上了独占锁。
接下来,A想给草莓数据上独占锁,B想要给苹果数据上独占锁。
由于任何一方都要等对方解除锁,处理就进行不下去了,为了解决这个问题,就必须先解除其中一方的锁,即取消某一方的事务。
取消事务我们称之为回滚(rollback)。
事务执行的过程中发生问题不能确认的情况下,不会提交而是进行回滚。


为了使数据库操作中不发生矛盾,数据库事务必须由提交或回滚中的任意一个指令来结束。

隔离级别
在现实的数据库中,同时执行的事务不断增加,因此能够逐渐控制事务之间互相干涉的级别。这叫做隔离级别(isolation level)。

下图来自:事物级别,不可重复读和幻读的区别是什么

脏读(dirty read) 是指事务1在提交前事务2读取该行,在事务1回滚的情况下,事务2读取了不存在的行这种现象。

无论是脏写还是脏读,都是因为一个事务去更新或者查询了另外一个还没提交的事务更新过的数据。但由于另外一个事务还没提交,所以他随时可能会反悔会回滚,那么必然导致你更新(查询)的数据就没了。—引自:五分钟了解Mysql脏读、幻读、不可重复读、mvcc

非重复读(non-repeatable read) 是指事务1读取行时,事务2在更新该行并提交时,事务1再一次读取该行时发生数值不一致的现象。
虚读(phantom) 是指事务1进行检索,获得多行结果,事务2追加了符合该条件的行,事务1第二次检索的结果发生不同的现象。

索引
为什么需要索引?

数据库的规模变得更大,更多的人使用数据库时,检索商品可能会变得很慢,通过设定索引能够很快找到目标内容。使用索引功能的话,可以减少访问硬盘的次数,可以提高访问速度

B树索引

散列索引

索引可能会引发的问题
如果过分生成索引的话反而会降低效率。
数据频繁更新的话,每次都要更改索引,还是会耽误更新速度的。

下图来自:索引设计

最优化查询
在进行查询时,要解析查询内容,按照适当的顺序操作。相同的查询,根据投影、选择、连接等的不同,运行顺序也不同,处理的时间也不同。

一般地按照:
1.先行执行选择减少行数
2.再执行投影减少与结果无关的列
3.最后执行连接
这样的标准确定查询顺序

5.2 数据库安全问题

若所有人均能访问数据库并修改数据,可能会出现数据被恶意篡改

为避免所有人均可对数据库数据进行读取和修改而造成混乱
第一、我们要控制能够访问数据库的人,要访问数据库必须输入用户名和密码,即限制能够使用数据库的用户
第二、对能够访问数据库的用户进行操作权限的设定,即限制用户操作

5.3 数据库的故障恢复

故障种类

事务故障是指因为事务不完备而导致事务不能结束的情况。在事务故障中,发生故障的事务将被回滚。
系统故障是指因为停电等原因造成系统停运的情况。在系统故障中,重新启动后进行故障恢复处理。通常,对故障发生时未提交的事务进行回滚,对故障发生时已提交的事务进行前卷。
介质故障是指硬盘损伤的情况。发生介质故障时,可以基于备份文件进行故障恢复。对备份后提交的事务进行前卷处理。

在数据库中,正在处理数据时会生成一个叫做日志的记录,它记录了用户对数据所进行的变更等操作。最重要的是在更新数据库时,记录了更新前和更新后的值

系统发生故障时首先要重新启动系统,然后利用日志恢复数据库。
恢复的方法根据事务是否提交而不同。
故障发生时事务已提交的恢复方法:前滚

前滚指的是将数据库系统恢复到某一时刻之后的状态,前滚则是将数据库恢复到之后的状态。—引自:数据库操作必备技能:前滚与回滚详解

故障发生时事务未提交的恢复方法:回滚

回滚是将数据库恢复到某一时刻之前的状态。当一个事务出现错误或者被撤销时,我们需要将数据库回滚到之前的状态。回滚操作会撤销之前的事务操作,将数据库恢复到之前的状态,确保数据的一致性。—引自:数据库操作必备技能:前滚与回滚详解

5.4 数据库的应用

银行储蓄账户管理系统

火车票预订系统

web与数据库
web上输入关键词

这个搜索关健词将作为HTTP请求被送出,接受请求并进行处理的电脑叫做服务器(sever),在服务器上生成SQL,然后将此SQL命令发送至数据库进行查询

最后数据库将检索结果发回

存储程序和触发器
在这样一个系统中,网络上流动数据的通信量还是个问题。数据库中由于有存储程序等功能,所以能够在数据库服务器中配置预先查询等程序。由于数据库服务器中配置了程序,因此没有必要频繁发送SQL查询命令,存储程序能够减少网络的负荷。
在数据更新的时候存储程序就会自动启动,这就叫做触发器(trigger)。也就是说某人发出订单更新了数据库时,能自动减少库存进行配送处理。

三层客户端服务器系统由表示层、功能层和数据层构成

表示层接受用户的输入、获取对数据库的检索条件等。另外,表示层还会对数据库进
行查询后获得的结果进行显示。通常由Wb浏览器实现表示的功能。
功能层进行数据加工。该层对SQL命令进行整合。这些处理由各种程序语言等记述。
根据处理的内容和负荷,也可由应用服务器、Web服务器等多个服务器分担处理。
数据层由数据库服务器处理。数据库服务器管理数据库。根据SQL等的查询要求,检
索结果从数据库返回。

分布式数据库
由多个服务器来管理数据库,但是必须把它们当做一个整体的数据库来处理。

分布式数据库的构成方式:水平分布、垂直分布
水平分布是指使用多个同级别的数据库服务器的方法,水平分布式数据库中即便一个服务器发生故障,数据库仍能正常工作。对故障有很强的抵御功能。

垂直分布是数据库服务器具有不同功能的分布方式。由承担主要任务的主服务器和承担其他处理任务的服务器构成。
各服务器可以使用主服务器的数据库,但是主服务器不使用其他服务器的数据。
因此,在垂直分布式数据库中,主服务器易于管理的背后是主服务器集中承担通信任务。
这种分布方式多用于数据库由整个组织的主服务器和各部门服务器构成的情况。

分布式数据库的分配方法:水平分配、垂直分配
水平分配是将数据按照行的方向进行分割。分割后的行分别配置给各服务器。
例如,相同类型的数据分地域管理时,就会采用这种方式。

垂直分配是将数据按照列的方向进行分割。分割后的列分别配置给各个服务器。
例如,在希望将商品部、出口部和外国部等独立部门的数据库按照分布式数据库进行管理时多采用这种方式。

分布式数据库中表格的连接
分布式数据库增加了网络间的通信量,从而增大了网络的负荷。特别是在服务器之间连接表格的情况下,必须注意数据的通信量。
分布式数据库连接表格的方法有以下几种:
嵌套循环

将服务器A中表格的某一行发送至服务器B,与服务器B中表格的每一行进行比较之后连接。将服务器A中表格的每一行都按照此程序反复操作


分类合并

分类合并是一种将各服务器表格预先分类的方法。

将服务器A的表格和服务器B的表格各自分类。之后将服务器A的表格发送至服务器B。因为表格事前已经分类,因此能够通过一个方向的读取进行连接。


半连接

半连接是一种仅将与连接相关的列发送至与之连接的服务器,在减少行之后进行连接的方法。

例如,首先将服务器A的商品编码列发送至服务器B。之后抽取服务器B中相应的商品编码。再将抽取的行发送回服务器A,根据这些行进行连接处理。因为减少了行,所以可能减少了网络的通信量。

散列半连接

在散列半连接过程中,先求取服务器A中列的散列值,并发送至服务器B。在服务器B中也求取散列值。通过散列值之间的检查进行连接。


分布式数据库中数据的复制
在分布式数据库中,为了减少网络的负荷,数据库设置了复制的功能,我们称之为复制。
通过重复使用数据的复制,减少了网络中传送的数据。
我们将主要的数据库称为主数据库。复制称为replica,复制的方式有以下几种。
读取专用

是一种生成并下载从主服务器的主数据库中读取专用复制的方法。复制是在主服务器连接时生成的。复制仅可读取。


可更新主服务器

从主服务器生成复制。该复制能够更新。更新复制时被反映在主服务器的主数据库中。


可更新各个服务器

各服务器之间拥有相同主服务器的方法。在各个服务器中更新后,可反映在其他服务器的数据库中。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1540195.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

系统架构设计-构建系统应用

1. 系统架构目标与设计原则 在设计系统架构时,我们的目标是确保系统具有以下特点: 可靠性:系统能够持续稳定运行,保证业务可用性。可伸缩性:系统能够根据负载变化自动扩展或收缩,以应对不同的流量需求。容…

【Java高级】利用反射机制获取类的所有信息

文章目录 1.相关准备2.导航图3. 相关的方法----------------------------------------------类------------------------------------------------------1 类的修饰符2 类名 -----------------------------------------------属性--------------------------------------------…

FileZilla 链接服务器提示 20 秒连接超时

FileZilla 有个默认设置是如果 20 秒没有数据的话会自动中断链接。 Command: Pass: **************** Error: Connection timed out after 20 seconds of inactivity Error: Could not connect to server修改配置 这个配置是可以修改的,修改的步骤为: …

保研复习概率论1

1.什么是随机试验(random trial)? 如果一个试验满足试验可以在相同的条件下重复进行、试验所有可能结果明确可知(或者是可知这个范围)、每一次试验前会出现哪个结果事先并不确定,那么试验称为随机试验。 …

零基础机器学习(4)之线性回归的基本原理

文章目录 一、线性回归的基本原理1.相关与回归2.线性回归的原理分析①线性回归的一般公式②线性回归的损失函数③线性回归方程的参数求解方法A.最小二乘法B.梯度下降法 一、线性回归的基本原理 1.相关与回归 相关描述的是变量之间的一种关系。 从统计角度看,变量之…

数据可视化-ECharts Html项目实战(5)

在之前的文章中,我们学习了如何设置滚动图例,工具箱设置和插入图片。想了解的朋友可以查看这篇文章。同时,希望我的文章能帮助到你,如果觉得我的文章写的不错,请留下你宝贵的点赞,谢谢 数据可视化-ECharts…

OpenLayers基础教程——WebGLPoints中要素样式的设置方法解析

1、前言 前一篇博客介绍了如何在OpenLayers中使用WebGLPoints加载海量数据点的方法,这篇博客就来介绍一下WebGLPoints图层的样式设置问题。 2、样式运算符 在VectorLayer图层中,我们只需要创建一个ol.style.Style对象即可,WebGLPoints则不…

【QT+QGIS跨平台编译】之九十:【QGIS_Crashhandler+Qt跨平台编译】(一套代码、一套框架,跨平台编译)

文章目录 一、QGIS_Crashhandler介绍二、QGIS下载三、文件分析四、pro文件五、编译实践一、QGIS_Crashhandler介绍 QGIS_Crashhandler模块是QGIS中的一个重要组成部分,它提供了QGIS程序的错误崩溃处理与跟踪。 二、QGIS下载 QGIS网址: QGIS Source Download 获取最新版本的…

iOS UIFont-新增第三方字体

背景 在项目中添加三方字体,是在开发中比较常见的需求,每次新增字体,都会遗忘其中某个步骤,又要去百度一下才能把字体添加使用成功。每次这样有点浪费时间和打击自信,于是便想着,自己好好来理一理新增字体…

ubuntu arm qt 读取execl xls表格数据

一,ubuntu linux pc编译读取xls的库 1,安装libxls(读取xls文件 电脑版) 确保你已经安装了基本的编译工具,如gcc和make。如果没有安装,可以使用以下命令安装: sudo apt-update sudo apt-get install build-essentia…

康奋威科技邀您到场参观2024长三角快递物流展

参展企业介绍 杭州康奋威科技股份有限公司创立于2005年,由国家“万人计划”专家任天挺先生创立并担任法人,是一家专业从事智能装备研发与制造的国家级高新技术企业。专注于自动化控制、机械设计、信息化方面的技术研究,主要为太阳能光伏、智…

深入理解Redis的Sentinel机制

Sentinel简述 Sentinel为了解决什么问题? Sentinel(哨岗、哨兵)是Redis的高可用性(high availability)解决方案。 我们知道Redis 的主从复制模式可以将主节点的数据改变同步给从节点,这样从节点就可以起…

C/C++之内存旋律:星辰大海的指挥家

个人主页:日刷百题 系列专栏:〖C/C小游戏〗〖Linux〗〖数据结构〗 〖C语言〗 🌎欢迎各位→点赞👍收藏⭐️留言📝 ​ ​ 一、C/C内存分布 我们先来了解一下C/C内存分配的几个区域,以下面的代码为例来看…

Cmake和opencv环境安装

1 Cmake下载及安装 Download CMake 根据需要下载,历史版本下载方法如下 CMake 的版本号中的后缀 "rc1" 和 "rc2" 表示 Release Candidate 1 和 Release Candidate 2,它们都是候选版本,用于测试新功能和修复 bug。通常情…

目标检测的指标评估

目标检测模型的评价指标主要用于衡量模型的性能,特别是它在定位和识别目标方面的准确性。以下是一些常见的评价指标: 1. 精确度 (Precision): 表示检测到的目标中,正确检测到的目标所占的比例。精确度高意味着模型产生的误报(错误…

精神暴力的来源与解药

导致人生病的,不仅是病毒或细菌,也有精神暴力。与病毒破坏物理肌体、摧毁生命不同,精神暴力是让人们在过度的自我狂热中燃尽自我、而毁灭自身的。 21世纪以来,精神方面的疾病越来越多,为什么这样呢?大的背景…

fiddler过滤器使用,隐藏图片、js、css请求

如果抓包过程中不想查看图片、js、css请求,或者只想抓某个ip或者某个网页下的请求,可以在过滤器中设置。 (1)没有开启过滤器 可以看出所有的请求都会抓取,cs、js、图片请求都有 (2)开启过滤器 …

代码随想录算法训练营Day55 ||leetCode 583. 两个字符串的删除操作 || 72. 编辑距离

583. 两个字符串的删除操作 这道题的状态方程比上一题简单一些 初始化如下 class Solution { public:int minDistance(string word1, string word2) {vector<vector<int>> dp(word1.size() 1, vector<int>(word2.size() 1));for (int i 0; i < word1…

Kotlin零基础入门到进阶实战

教程介绍 Kotlin现在是Google官方认定Android一级开发语言&#xff0c;与Java100%互通&#xff0c;并具备诸多Java尚不支持的新特性&#xff0c;每个Android程序员必备的Kotlin课程&#xff0c;每个Java程序员都需要了解的Kotlin&#xff0c;掌握kotlin可以开发Web前端、Web后…

计算机网络:物理层下的传输媒体概览

✨✨ 欢迎大家来访Srlua的博文&#xff08;づ&#xffe3;3&#xffe3;&#xff09;づ╭❤&#xff5e;✨✨ &#x1f31f;&#x1f31f; 欢迎各位亲爱的读者&#xff0c;感谢你们抽出宝贵的时间来阅读我的文章。 我是Srlua小谢&#xff0c;在这里我会分享我的知识和经验。&am…