最新实时数据库技术PPT课件.ppt
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_05.gif)
《最新实时数据库技术PPT课件.ppt》由会员分享,可在线阅读,更多相关《最新实时数据库技术PPT课件.ppt(90页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、实时数据库技术4.1实时应用的数据处理实时应用的数据处理随着计算机应用技术的发展,实时系统处理的数据信息量越来越大,对数据处理的功能要求也越来越高。这些应用有着与传统应用不同的特征,主要表现在两个方面:一方面,要维护大量共享数据和控制知识;另一方面,其应用活动(任务或事务)有很强的时间性,要求在规定的时刻和(或)一定的时间内完成其处理;所以,这种应用对数据库和实时处理两者的功能及特性均有需求,既需要数据库来支持大量数据的共享,维护其数据的一致性,又需要实时处理来支持其任务(事务)与数据的定时限制。3.可靠性可靠性实时系统的可靠性主要是系统的正确性,即系统所产生的结果不仅在值上是正确的,而且在时
2、间上也是正确的。4.结构复杂性结构复杂性实时任务(事务)往往具有各种结构上的相互联系,无结构的、原子和隔离的传统事务模型不完全适用,而实时系统有时要求嵌套或层次结构事务,有时要求分裂和合并、通信与数据交换等,因此必须研究适应实时系统要求的具有复杂结构的事务模型。5.分布规律性分布规律性实时任务(事务)通常是按一定周期执行的,但也有非周期或随机的,还有一些是长寿(循环或无终止事务)的。为了实现有效调度,必须事先知道各种任务(事务)的类型及其到达的分布规律。长寿事务和周期事务的实现比较容易,而非周期和随机事务则很困难。处理时可以将一个非周期事务的两次执行间的最小间隔时间视作其周期,从而将其当作周期
3、事务来调度;而对于随机事务就只能由系统动态地进行处理。6.不可逆性不可逆性实时应用中有很多活动是不可逆的,如过程控制的器件加工、物料投放等活动,记录飞行体的位置、速度、方向的事务等,它们都是不可逆的。还原或重启动对于不可逆事务是毫无意义的,因此必须为实时事务的恢复开发新的概念、技术和方法。7.替代性替代性当实时系统认定某个任务不能按时完成时,可以调用其它活动进行替代或补偿,这称为实时系统的应急计划,它可以提供虽非最佳但可用的结果。如何确定应急计划以及应急计划的选择评估及实施都是实时系统应该考虑的部分。4.2.3实时数据库与传统数据库实时数据库与传统数据库传统数据库的事务具有ACID(Atoma
4、icity,Consistency,Isolation,Durability)特征,其特点如下:1强调一致性、可恢复性和永久性;2事务无内部构造,是平坦的,彼此间无合作(交互作用、通信);3事务执行时没有可预测性,其执行时间不可预测;4无“时间维”,更不显式地考虑时间。在传统数据库中,事务的原子性和可串行化是普遍接受的正确性和一致性标准。实时数据库系统和传统数据库有着根本性的不同,实时事务由以下特性确定:1可见性:事务执行时可以查看另一事务的操作结果的能力;2正确性:事务本身的正确性及提交事务所产生的数据库状态一致性;3可恢复性:发生故障时使数据库恢复到某种认为是正确状态的能力;4永久性:事务
5、记录其结果到数据库及识别其中数据的有效期的能力;5可预报性:事先预测一个事务是否会满足其时限的能力。最根本的区别在于数据与事务的定时限制。4.2.4实时数据库与其它高级数据库的联系实时数据库与其它高级数据库的联系1.实时数据库与内存数据库实时数据库与内存数据库为了实现实时系统中数据和事务的实时(及时)性,必须尽可能加快实时数据库的响应和处理速度,同时实时数据库中的实时事务要求系统能较准确地预报事务的运行时间。但对磁盘数据库而言,由于磁盘存取、内外存的数据传递、缓冲区管理、排队等待及锁的延迟等使得事务实际平均执行时间与估算的最坏情况执行时间相差很大,不能满足部分实时系统的“及时性”要求。如果将整
6、个数据库或其主要的“工作”部分放入内存;使每个事务在执行过程中没有磁盘I/O,则为系统较准确估算和安排事务的运行时间,使之具有较好的动态可预报性提供了有力的支持,同时也为实现事务的定时限制打下了基础。内存数据库的设计应该打破传统磁盘数据库的设计观念,考虑内存直接快速存取的特点,以CPU和内存空间的高效利用为目标来重新设计开发各种策略与算法、技术、方法及机制。也可以说,内存数据库是在实际应用系统的实时性要求下而产生的。2.实时数据库与主动数据库实时数据库与主动数据库今后,实时数据库的应用可能越来越复杂,为了满足各种复杂的应用要求,有必要使实时数据库系统具备高度的动态性、自适应性和智能行为。而主动
7、数据库(ADB)技术与实时数据库(RTDBS)的结合为RTDBS的自适应性及智能性的实现创造了合理的机制。主动数据库(ADB)技术现在已经在实时数据库(RTDBS)领域广泛应用。3.实时数据库与分布式数据库实时数据库与分布式数据库随着Internet的迅速推广,实时系统应用范围和规模不断扩大,也对实时数据库系统提出了分布式计算的要求,因而有必要将分布式数据库技术运用于实时系统中。为了满足对数据的实时和分布的要求,分布式实时数据库(DRTDB)将具有执行期限的数据和事务分布在不同的结点上,由分布式实时数据库管理系统来统一管理、调度执行。国内的实时数据库产品与国外的产品相比,都有一定的差距,主要体
8、现在其事务处理层并没有实现完全的分布式事务处理,与实时数据库的理论有一定的距离。实时数据库与内存数据库、主动数据库、分布式数据库的有效集成才可以满足现代数据库的需求。4.实时数据库与时态数据库实时数据库与时态数据库与时态数据库相同之处是,实时数据库也涉及时间信息。但是,时态数据库与实时数据库存在区别,主要表现在:时态数据库目的在于处理包含随时间变化的信息,维护数据库中对象经历的历史变化;而实时数据库则更侧重考虑信息的“及时”性,它的查询与事务处理都有与之相联系的定时限制,结果产生的时间与结果本身一样重要。时态数据库保存数据库对象随着时间变化的特征,但缺乏维护数据有效性的机制,不显式考虑查询与事
9、务有关的时间限制。在TDB中,随时间变化而改变的数据的处理是保留“历史”,增加新的数据项,可以查询某个过去时间曾经有效的数据。RTDB则提供维护数据有效性和事务及时性的机制,一般只存取数据库当前“有效”的信息。事务必须维护数据库对象的“时间一致性”,所以有时间限制与之联系。时态数据库更多考虑“结构”,实时数据库则侧重考虑“行动”(控制实时),有时“及时”性比正确性更重要。4.3实时数据库的特征实时数据库的特征一个典型的实时系统由三个紧密结合的子系统组成:被控系统、执行控制系统、数据系统。被控系统就是实际的应用过程,称为外部环境或物理世界,执行控制系统监视被控系统的状态,协调和控制它的活动,称为
10、逻辑世界;数据系统有效地存储、操纵与管理实时(准确和及时)信息,称为内部世界;执行控制系统和数据系统统称为控制系统。内部世界的状态是外部环境状态在控制系统中的映像,执行控制系统通过内部世界状态而感知外部环境状态,并在此基础上与被控系统交互作用,所有这些都与时间紧密相联。4.3.1RTDB的数据特征的数据特征RTDB中的一个数据对象D由3个分量组成(dv,dtp,devi),它们分别为D的当前值、采样时间、外部有效期(外部现实对象状态变化的时间间隔),外部有效期devi即自dtp算起dv有效的时间长度。对于RTDB中的每一个数据对象D,都有内部一致性、外部一致性和相互一致性特征。由定义可以看到,
11、实时数据具有时间特征。实时数据给外部世界提供了一个真实和及时的表示,随着外部环境的变化,反映外部环境状态的实时数据也随之变化.在实时数据库中,实时数据的时标dtp必须足够地接近真实时间,当前值dv只是在一定的时间devi内有效,在超过devi以前,数据一定要被最新的外部数据更新。内部一致性dv满足预先定义的数据库内部状态的完整性和一致性限制。这就是传统意义下的数据正确性。数据库的变更都是以事务的形式进行的,因而事务操作的完整性校验和可串行化能提供内部一致性保证。外部一致性外部一致性(又称为绝对一致性)是指实时数据库中的数据应与外部数据(又称为环境数据)相一致,即要求数据库中的数据能及时地反映外
12、部环境的状态。设tc为当前或检测时间,当且仅当(tcdtp)devi,则说D是外部一致的,即dv和对应的外部现实对象的状态是一样的。数据的外部有效期dtp,可以通过足够的外部环境对应参数的取样来获取。外部一致性与时间限制紧密相关,它难以用可串行化的处理技术来实现,因为现有的确保可串行性的并发控制协议都是基于封锁或还原/重起动(Rollback/Restart)的。封锁可能导致优先级颠倒(低优先级的事务阻塞高优先级事务);而还原/重起动除浪费系统资源从而引起事务超出时限外。实时系统有的事务根本不能还原/重启动,对于这种反映外部环境不可逆事件的事务,不能封锁或还原,必要时只有先牺牲内部一致性而确保
13、外部一致性,然后再来恢复内部一致性。相互一致性相互一致性用来决策或导出新数据的一组相关数据称为一个相互一致集,记为R,其中的数据必须尽可能地在一个允许的公共时间期内被采取(或导出),这个公共时间期就称为R的相互有效期,记为Rmvi,对于R中的任两个数据D和D,有|dtpdtp|Rmvi(即两个数据的采样时间在公共时间期间内),则说R中的数据是相互一致的。相互一致性保证了用来作决策或导出新数据的一组数据是在允许的时间范围内彼此接近地产生的。Rmvi的获得不像devi那么简单,且它们之间存在着相互性,R中的各数据的devi的最小者对Rmvi起着决定作用。时间一致性外部一致性和相互一致性都是关于时间
14、的,故统称时间一致性。状态正确性既是内部一致又是时间一致的数据才是正确的。4.3.2RTDB的事务特征的事务特征RTDB标识性特征:定时性以及语义相关性。1.定时性定时性定时性是RTDB事务的根本特点,定时可以是绝对、相对或周期时间。RTDB的定时性一方面由数据的时间一致性引起,此时它往往取周期或定期性限制的形式,如“每5秒取样一次”、“7:00启动机器人”等;定时性的另一根源是对现实世界施加于系统的反应时间的要求,这时它典型地取施加于非周期事务的截止时间限制的形式,如“若温度达到1000度,则在5秒内加冷却剂到反应堆”。定时性包含两方面的含义:(1)定时限制截止时间:实时事务完成的最后期限。
15、它可以有硬、软之分,具有硬截止时间的事务(称为硬实时事务),必须在其截止时间以前完成,否则将带来灾难性的后果,故到达其截止时间还不能完成的硬实时事务必须夭折。具有软截止时间的事务(称为软实时事务),应该在其截止期完成,但超过其截止时间也还有一定意义(尽管不断下降),故软实时事务到达其截止时间后不必立即夭折它。到达时间:事务在系统中生成的时间。它可以是可预报的,也可以是不可预报的。可预报的到达时间可显式地给出或者作为一个导出函数,如周期事务的到达时间是可预报的。不可预报的到达时间是指当相应事务到达系统时才能知道,非周期事务的到达时间就是不可预报的。期望执行时间:估算的最坏情况执行时间。由于各种不
16、可预报性因素,往往很难做到准确,估算的最坏情况执行时间可能与实际情况相差很大。然而,为了合理地得到事务的截止时间及适当地调度以使其满足,又必须事先较准确地估算其执行时间。(2)定时正确性即事务能按指定的时间要求正确执行,它要求权衡定时限制与数据一致性要求等多方面因素提供合适的调度与并发控制算法。2.语义相关性语义相关性(1)结构相关结构相关来自于复杂事务模型的结构特征,用来建模复杂事务内部并发事务行为的一种约束。不同的复杂事务模型有不同的结构相关性,但它们可以通过事务间的“执行依赖性”来定义,实时嵌套事务中基本的事务依赖有:子事务对父事务的开始依赖(BD):子事务开始前父事务已经开始。父事务对
17、子事务的提交依赖(CD):父事务提交前子事务已经结束(提交或夭折)。子事务对父事务的夭折依赖(AD):父事务夭折则子事务一定夭折。(2)数据相关数据相关就是不同事务间的共享数据联系,但此“共享”概念比传统的具有更广的意义。实时嵌套事务中的子事务共享父事务数据,子事务提交时对数据库的更改委托给父事务,只有父事务提交时才能真正地写入数据库。(3)结果补偿一个实时应用常常由若干任务组成,而一个任务有时可以通过不同途径来实现。一个应用建模为一个事务,一个任务则建模为一组功能等价的子事务,称为该任务的替代集。若一个任务的替代集中的子事务之一能成功执行,则该任务是可完成的。若对应一个事务的所有任务可完成,
18、则该事务是成功的(可提交)。功能替代导致了事务执行路径的不确定性,即一个事务成功执行的路径依赖于执行过程中(子事务)失败的发生,且即使某些子事务失败了,事务仍可能顺利提交。这还体现了实时事务的健壮性要求,即有的事务(任务)不能失败。由于事务的结构复杂性和功能替代性,事务的执行经历是不确定,一个子事务的执行直到提交时还不能确定它是否需要。另一方面,一个实时事务可以物理改变现实世界的状态,换句话说,事务可以启动各种活动,这些活动在它提交前就已经影响了现实世界,因而当这种事务夭折时,不能进行传统意义下的“还原”(Undo)。所以,需要一种“补偿”活动来抵消它所有的影响,这种补偿活动也是事务。对于一个
19、(子)事务,若存在能抵消它提交后所产生的所有影响的(子)事务,则称其为是可补偿的,否则是不可补偿的。当然,不是每一个(子)事务都是可补偿的,不可补偿的(子)事务在知道它确实是需要的以前,一定不能提交。3.实时事务的正确性实时事务的正确性在正确性概念及内涵方面,实时事务与传统事务的本质区别就在于其有定时限制。因此,事务处理必须同时满足一致性要求和定时限制。数据库状态正确性包含内部一致和时间一致,事务执行正确性则包含其结果正确性、行为正确性、结构正确性和时间正确性。传统数据库中的原子性和可串行化包含了事务正确性的所有概念。而实时嵌套事务正确性的内容更为丰富,实现的手段也就更为复杂。考虑一种新颖的准
20、一致性可串行化并发控制策略,将事传统可串行化标准在实时环境下显得太严格,限制了系统中事务执行的并发度,对于满足事务定时限制是不利的。所以,需要务执行给系统带来的不一致限定在一定的范围内,并在一定的时机恢复数据库到一致状态。而实时事务的时间正确性需要“识时”协议实现,结构正确性需要事务管理检查事务间的结构相关性来实现。4.4实时数据库管理系统实时数据库管理系统一个实时数据库管理系统(RTDBMS)也是一个数据库管理系统(DBMS),但是有新的特性。4.4.1实时数据库系统的主要问题实时数据库系统的主要问题1数据模型及语言数据模型及语言数据模型及其语言是RTDB领域首先要研究解决的主要问题之一。要
21、开发实时数据模型,就必须设计好允许用户说明实时数据模型中所含的语义知识的、使用户能以各种方式使用的实时数据定义和查询语言,以及能说明“复杂事务”的结构及相互作用的实时事务执行说明语言。2事务模型与特性事务模型与特性具有ACID特性的传统事务模型在实时数据库系统中已不适用,必须进行扩展或开发新的“复杂事务”模型。与传统的事务是原子的、平淡的数据操作序列的概念相反,复杂事务为可以形成各种“内部结构”的数据操作集合,它可以具有嵌套或层次的内部结构、分裂或合并结构、交互合作或通信结构等,传统事务仅是其最简单的特例情况。3事务处理事务处理RTDB系统中事务处理必须要满足事务的各种定时限制,并发控制是实时
22、事务处理的另一个方面。4数据存储管理数据存储管理数据库操作基本上是I/O受限的,对于实时事务而言,传统数据库的磁盘存取延迟带来的影响是不能忍受的。RTDB系统必须考虑如何消除数据库操作中的磁盘存取延迟以满足实时事务的定时限制,这将要求“内存数据库”的支持。5I/O与缓冲区管理与缓冲区管理除CPU与数据外,磁盘I/O和缓冲区对RTDB系统也是很重要的资源。I/O调度对实时系统是一个很重要的研究方面,RTDB系统需要“识时”的I/O调度算法,其目标是支持事务的定时限制。缓冲区是另一重要资源,缓冲区管理涉及在当前事务之间的存储空间分配问题,其目标是高优先级的执行不因此而受阻。6恢复问题恢复问题恢复在
23、传统数据库中已经是一个复杂的问题,而在RTDB系统中,会变得更为复杂。必须要考虑到以下因素:恢复过程会影响正在进行的事务,使其超过截止期,这对硬实时事务是不可接受的。RTDB系统有时宁愿接受部分不一致的数据以确保其及时性。对于不可逆的事务、短暂的数据,数据库的恢复是没有意义的。4.4.2实时数据库系统结构实时数据库系统结构RTDBMS的设计目标首先是对事务定时限制的满足,其基本原则是:宁要部分正确而及时的信息,也不要绝对正确但过时的信息。系统性能指标是满足定时限制的事务的比率,它要求必须确保硬实时事务的截止期,必要时宁肯牺牲数据的准确性与一致性。软实时事务满足截止期的比率相对较高,当然100满
24、足截止期是非常困难的。因此,除了上述一般DBMS的功能外,RTDBMS还具有以下功能特性:(1)数据库状态的最新性,即尽可能地保持数据库的状态为不断变化的现实世界当前最真实状态的映像。(2)数据值的时间一致性,即确保事务读取的数据是时间一致的。(3)事务处理的“识时”性,即确保事务的及时处理,使其定时限制尤其是执行的截止期得以满足。因此,RTDBMS是传统DBMS与实时处理两者功能特性的完善或无缝集成(Seamless Integration)。它与传统DBMS的根本区别就在于具有对数据与事务施加和处理“显式”定时限制的能力,即使用“识时协议”来进行有关数据事务的处理。(1)实时应用:是指具有
25、定时限制的数据库任务,是实时事务产生源。(2)实时事务管理:管理实时事务的生存期,包括产生、执行和结束。(3)识时并发控制:实现识时的并法控制算法。(4)识时调度:实现识时的优先级调度算法。(5)实时资源管理:包括CPU管理、缓冲区管理、实时数据管理、实时数据管理又包括数据操作、存储和恢复管理等。(6)实时I/O调度:实现定时限制的磁盘调度算法。4.4.3实时数据库执行模型实时数据库执行模型1.任务任务/事务模型事务模型传统的ACID(原子、一致、隔离和永久)性的事务模型对RTDB已不适用,需要具有内部构造和/或彼此相关性的“复杂”事务模型,即嵌套、合并/分裂、通信和合作事务模型等。故RTDB
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 最新 实时 数据库技术 PPT 课件
![提示](https://www.taowenge.com/images/bang_tan.gif)
限制150内