SharePle数据库复制解决方案.docx

《SharePle数据库复制解决方案.docx》由会员分享，可在线阅读，更多相关《SharePle数据库复制解决方案.docx（12页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、SharePlex 数据库复制解决方案1 SharePlex 数据复制技术如何在不宕机的状况下，对 Oracle 数据库内的海量数据进展转移和治理， 这是一种长期存在的用户需求。Shareplex 可以让您的 Oracle 数据库分身有术， 满足您多样化，高性能的应用需求。Oracle 复制容灾产品 SharePlex for Oracle 是一种准实时、低带宽、跨平台、跨 Oracle 版本的 Oracle 复制解决方案，承受业界内独特的技术、领先的产品构造确保企业实现其高可用性和高性能的治理目标。Shareplex 支持面对高可用性、灾难恢复、报表剥离、数据分发/共享和应用程序集成等不同的

2、应用场景，不会对 Oracle 生产系统的性能造成影响。1.1 SharePlex 技术原理根本构造以以以以下图所示为 SharePlex for Oracle 的根本构造，其中涉及较多的技术细节。1.1.2 数据捕获10SharePlex for Oracle 中由捕获进程来收集发生变化的数据，此进程的独特之处在于它几乎不对生产数据库带来任何开销。此捕获过程中完成的操作为：捕获进程从 Oracle 日志文件中读取信息，因此复制过程不会给生产数据库实例带来性能问题只有发生转变的数据被传输，而不是日志文件中的全部信息，因此SharePlex 的网络负载格外小尽管需要在 Oracle 数据库中安装

3、少量的对象用来存储有关复制的一些根本信息，但源数据库不需要参与到数据捕获和传输过程中SharePlex 的捕获进程不但可以读取在线的日志文件，而且可以读取归档日志，甚至当归档日志文件被移动到其它设备上时，SharePlex 会发出 提示信息。正是这种力气极大地增加了系统的冗余功能。例如，假设捕获进程由于某种缘由被停顿，当它重启动后数据同步不会受到影响捕获进程驻留在源系统上，自动读取 Oracle 的在线日志文件。这种读操作是从操作系统的角度来完成的，而不是通过数据库。通过将日志文件作为猎取变化信息的 源泉，Quest 可以完成数据的复制而不会给生产系统带来额外的开销。由于 Oracle 使用日

4、志文件进展系统恢复，因此日志文件信息足够，其数据格式也足 够稳定。Quest SharePlex 目前已支持从 Oracle7.3.4 至 Oracle 10g 之间的全部版本。捕获进程连续监控日志文件用以捕获变化信息。当日志文件中消灭一条记录时，SharePlex 推断其是否属于被复制对象，假设是，则SharePlex 为该条记录参与用于打算此记录将被发向那个主机的地址信息并将包含地址信息的记录存放到自己的队列中，存储队列存在于数据库之外。发生转变的数据被马上处理并被发 送到目标系统中而不等待提交或回滚动作的完成，由于等待提交或回滚完成将带来延迟。当提交或回滚信息被写入日志文件时，它们也将被

5、发送到目标系统中，从而 在目标系统中完成相对应的操作。1.2 数据传输SharePlex 结合其自己的网络协议和 TCP/IP 协议来完成源和目标系统之间的数据传输。其相关的进程确保数据的正确接收和网络数据包的正确挨次，从而供给网络传输冗余，确保数据的完整。整个数据传输过程无需其它的中间件。1.3 应用数据应用进程将传送到目标系统中的信息转化为 SQL 语句，然后发送给 Oracle 执行。SharePlex 能够实现准确复制的一个重要缘由就是其能保证从源数据库到目标数据库的 Oracle 读全都性，不但按挨次复制事务，而且也复制上下文信息， 将源数据库中发生变化的全部事务信息都复制到目标数据

6、库中。1.4 复制模式SharePlex 支持多种灵敏的复制模式,主要包括：1.4.1 单向复制单向复制以生产系统作为复制时的数据源，假设目标数据库仅用于报表和查询， 则该副本可能是生产数据库的一个子集，只包括报表和查询所需内容，而非源系 统的 全部信息。SharePlex 允许用户在目标数据库中承受不同于源数据库的数据模式，并使用专为提高查询效率而建立的索引、主键和分区等。这种简洁、高效的复制方案，可满足任何需通过剥离报表和查询来改善系统性能的需求。这种水平扩展方案可不必引入冲突解决和锁治理机制，而直接卸载生产系统压力。1.4.2 双向复制双向复制是高可用型数据复制的典型配置。这种方式能在正

7、常工作方式下， 将主数据库的数据更复制到附属系统；一旦主系统消灭故障，业务处理需要切换到从 属系统时，即配置为自附属系统向主系统的逆向复制。这种配置要求目标例程处于可读写状态，并具有较高的牢靠性。只需短暂的中断，业务处理即可快速恢复，而不必进展漫长的重启和数据库恢复。该配置利用单个源系统，向多个目标例程复制数据。SharePlex 支持通过局域网和广域网的复制。在这这种配置时，远程用户可以通过数据复制建立的副本， 实现本地查询。1.4.3 合并复制在报表应用中，SharePlex 支持合并复制模式。该配置可将假设干个源数据库合并到单一目标例程中，并基此建立企业报表和查询应用。也称为多级复制或层

8、次化复制，可实现源系统到目标系统，再到下级目标数据库的复制。利用 SharePlex，中转系统可不再需要 Oracle 数据库。这种配置能在无法直接通讯的系统间实现数据传输，并使数据分发的压力从生产系统卸载到特地为数据分发而建立的复制副本上。1.5 SharePlex 主要技术指标Shareplex 产品的主要技术指标见下表：指标 技术原理复制的根本单位支持的复制模式描述读取 Oracle 的日志文件，猎取数据的变化信息，传输到目标系统，然后解析成 SQL 语句，在目标系统中执行。复制根本单位为表，也可以选定表的行或列进展复制单向、多向、一对多、多对一、级联复制对 DML 的支持对 DDL 的

9、支持支持全部 DML 操作支持大局部 DDL 操作，供给灵敏的配置选项，可以设置复制或者不复制相关的 DDL 操作对集群和 RAC 的支持 支持各种集群，支持 RAC目标系统支持的操作 目标系统支持 Read-Write 操作对系统性能的影响数据延迟网络资源的使用 对异构环境的支持对主席团 CPU 占有率很小和事务处理的类型、事务量、机器性能、优化配置有关， 对于每天日志量 40G 以内的 OLTP 系统来说，为秒级的数据延迟和复制表的数量有关，传输量最多为日志文件的 1/3支持不同的存储设备、主机、操作系统和 Oracle 数据库的不同版本2 适用场合2.1 数据容灾数据的安全及业务的连续性

10、是一个应用系统最根本的保证，关键业务数据的丧失或业务的中断可能会给企业带来不行估量的损失。幸运的是，自从 1997 年以来，SharePlex 已不断地被证明其领先的技术能够帮助企业实现这一治理目标。通过建立实时或准实时的容灾数据库，在消灭数据损失时不仅可以保证关键业务数据的准时恢复，也可以确保应用程序的准时接收，将故障对应用系统的影响降到最低。平战结合的解决方案数据容灾系统的建立，往往需要较大的软硬件投资，而以往的解决方案中， 目标系统在寻常始终处于不行用状态，只有在发生灾难时才可表达出其价值，造成了资 源及投资的极大铺张。Shareplex 的解决方案，为用户供给了一个随时可用的容灾数据库

11、，在充分满足容灾的前提下，也可为用户供给一个可用的查询数据库、或数据仓库的数据源，以分担生产数据库的负载，增加了容灾系统的利用价值。数据安全的保障承受 SharePlex 作为整个容灾系统的关键环节可以有效地保护企业的关键信息。当生产系统数据库消灭意外故障数据丧失，且本地备份无效时，可通过容灾数据 库中的数据来实现接近零数据损失的灾难恢复，确保核心业务数据的安全。此外，争论说明，大多数的数据丧失并不是系统崩溃导致的，相反，一些意外大事，如删 表、数据块级的数据损坏或数据文件的丧失才是数据丧失的主要缘由。而 SharePlex 容灾方案则可以防止这类意外的发生，为数据供给充分的保障。甚至当 生产

12、系统由于人为缘由造成数据丧失的时候，也可以通过 Shareplex 的配置策略实现数据的恢复。快速的容灾接收通常的容灾技术承受等待模式，即备份系统实际上不行用。假设要确保这个容灾系统在需要的时候可用还需进展测试，而测试往往需要备份系统处于离线状态，这 种测试同时也是一个开销较大的行为。假设不进展定期的测试，容灾系统的牢靠性会随着时间的推移而降低。由于 SharePlex 的解决方案中，容灾系统的数 据库始终处于翻开状态，实际上相当于对容灾系统进展不连续的测试， 确保容灾系统随时处于可用状态。对于很多企业来说，灾难恢复时间的长短直接影响着公司的业绩。SharePlex 支持多种配置方案，包括对等

13、配置方案，在这种配置方案中，两个数据库都处于可用状态，因而可实现快速的失败接收，接收时间根本等于应用系统切换数据库的时间。在容灾方案中没有比这种失败接收更快的方法了。业务连续性的保障另外，当利用 SharePlex 为业务系统供给灾难恢复力气时，容灾系统中的硬件环境又可以临时切换为生产数据库，以降低系统维护工作中的停机时间。切换回生产数据库后，数据可通过反向的数据复制链路恢复到源系统，没有任何数据损失。2.2 报表分别/负载均衡很多企业面临着一个布满竞争冲突的业务需求：一方面，企业需要确保在线事务处理系统具有良好的性能；另一方面，企业需要获得有效和准时的决策支持信息和企业报表。在传统的系统中这

14、两种需求的冲突极大地降低了业务系统的性能。利用 SharePlex 可以很简洁地建立一个与源系统保持数据同步的目标系统， 在这种配置环境下，在线事务处理可以获得很好的性能，而决策支持和报表处 理可在不影响正常业务的状况下进展。通过这种独特的配置策略可以格外好地解决 在线事务处理和报表处理之间的竞争问题，不管报表系统会消耗多大的系统资源， 对于客户和内部员工来说，系统的响应速度不会受到丝毫的影响。SharePlex 实现的报表分别/负载均衡方案具有以下特点目标系统的选用SharePlex 是一个基于 SQL 语句复制的规律复制软件，这就打算了它平台选择的自由性，可实现不同操作系统之间，不同数据库

15、版本之间的数据复制。 因此，用户可依据自己现有的软硬件平台来建设报表系统，无需购置昂贵的软硬件设备，大大降低了投资的本钱，也可使现有资源得到充分的利用。复制对象和复制方式大局部报表系统并不需要生产系统的全部数据，同时有些敏感数据也需要进展保护，由于 SharePlex 对复制内容的选择格外灵敏，可以是源系统的全部表或局部表，甚至可以依据需求，仅复制表中的局部字段，或符合特定条件的记录， 这就给报表系统的建设带来了极大的灵敏性，用户完全可以依据自己的需求定义数 据复制的内容。面对不同应用场景的性能优化为报表处理和在线事务处理规划和建立数据库是一件比较困难的事情。在抱负状况下，每一个数据库应有其自

16、己的索引模式、数据分区和数据归档，而利用SharePlex 则可以很简洁地实现这个目标。SharePlex 支持在事务 处理数据库和报表数据库上分别建立不同的索引，数据可在一个数据库中集中存储和治理而在另一个数据库中进展分区治理。另外，由于事务处理数据库和报表数据 库具有同步的数据，因此可以不对在线事务数据库进展归档，而只对报表数据库归档， 这种治理模式既可以保证在线事务处理数据库具有最好的性能，又可保证数据 始终处于可访问状态。2.3 消退系统移植过程中的停机时间尽管企业从规划设计良好的业务系统中收益，但也不得不面临系统移植和升级这一挑战。数据集中、技术的推陈出和效劳器的移植都是导致必需进展

17、系统移植的缘由之一。SharePlex 可确保在进展以上工作时正常的事务处理得以连续进展。源系统的功能不受到任何影响，SharePlex 只捕获移植过程中发生变化的事 务并将它们排队保存。当移植工作完毕后，这些被保存的事务将被应用到系统中并进展数据同步工作。一旦数据同步后，用户活动会有格外短暂的停顿，在此瞬间 将完成系统的切换动作。异构平台的迁移及数据库升级基于 SharePlex 对复制平台异构的支持，SharePlex 的系统移植方案，完全可以实现跨平台的数据库迁移或数据库版本的升级。例如：用户可以平滑的实现HP 平台下 Oracle 8i 到 AIX 平台下 Oracle 9i 的数据库

18、升级，没有任何限制。极短的停机时间以往的数据库迁移或升级，大局部状况下只能使用 EXP/IMP 的方式完成， 必定造成较多的停机时间，这对现今越来越要求高可用性的 7*24 小时系统来 说， 几乎是不行承受的。SharePlex 通过使用中间机，及数据变化的即时复制等技术， 使停机时间从几小时甚至几天，缩短到几分钟，最大程度的满足了用 户的需求。升级失败的回滚通常的数据库升级或迁移都存在着确定的风险，如数据库与应用程序兼容问题等，假设升级后 消灭未预料到的问题，或升级失败，则需要能够快速切换到原有的系统，以保证系统的正常运行。SharePlex 完成系统的升级或迁移后，可以建立一条由 系统到旧

19、系统的复制链路，将系统上的数据变化复制回旧系统。此时，假设系统消灭意外状况，应用不仅可以快速的切换到原有的系统， 也避开了切换过程中的 数据损失，保证了系统的平稳过渡。2.4 数据集中和数据播送企业可能常常需要进展数据集中或播送操作从而使事业的各个部门或分公司获得最的信息。SharePlex 在设计和开发时就考虑了此种需求，利用SharePlex，企业可以在任意时间，对任意地点进展信息更。SharePlex 通过格外有效的治理把握机制来实现数据集中和播送。SharePlex 供给细化的数据筛选功能，可按业务需要定制需要传输的数据，从 而缓解和消退了数据传输过程中的安全和带宽问题。例如，假设远程

20、节点只需要有关本地员工的根本信息而无需薪水信息，那么只需利用 SharePlex 传输相 关的数据行和字段即可。效劳器集中是系统迁移的一种形式。进展系统维护要带来开销，当效劳器数量众多时系统维护开销还是很可观的。为了 降低这些开销，一些企业在进展效劳器集中工作，通过将系统的规模集中到为数不多的高性能效劳器上可大大地提高工作效率并降低生产本钱。利用 SharePlex 可进展数据库的集中工作，从而加速效劳器的集中过程。异构平台支持通常，企业内部可能有多个应用系统，需要对这些系统中的数据进展集中， 生成企业的治理报表。从多个不同的 Oracle 实例中抽取数据和产生报表是件比较耗时和费力的事情，同

21、时，还要考虑各个数据库的版本及平台是否全都。SharePlex 可从多个不同版本或平台的数据库中抽取数据并将数据集中到一个 Oracle 实例中。在这种状况下，数据抽取和生成报表操作不再独立， 而是在同一个数据库实例中进展，从而消退了极其消耗资源的数据库间的关联操作。也避开了应用程序需要同时访问多个不同版本、平台数据库的麻烦。异地数据复制通常的数据集中需求，往往是异地数据库的数据复制，以往的方案往往需要较高的网络配置需求，而 SharePlex 的复制技术打算了它对网络资源占用极少， 完全可以适合各种远距离的数据复制，无须建设专用的网络，大大降低了用户在网络方面的投资。多对一或一对多的复制Sh

22、areplex 复制链路拓扑构造的定义格外简便，仅需要再配置文件中指定不同的目标系统即可，同时，一个节点可以同时承受多个数据源的数据复制，也可同时复制到多个目标系统。用户仅需要在每台数据库主机上安装一样的产品即可，不需要而外的简洁复制，激活相应的配置文件即可实现不同拓扑构造的数据复 制。2.5 应用数据同步随着应用系统的不断 进展，分布式的应用系统也得到了普遍的进展，但建设分布式系统的同时，也必需要考虑到各个系统之间数据的同步问题。到达实时的同步效果必定要极大的牺牲系 统的性能；而保证系统的性能则需要以数据的延迟为代价。SharePlex 供给的数据同步解决方案，可以从根本上解决这一技术难题，

23、在不影响系统性能的前 提下，实现各个生产中心的数据接近实时的相互同步，并可依据用户的需求，配置成单向数据同步，多个数据库的层叠复制，以及多生产中心的数据双向同步。简洁复制环境的支持SharePlex 的数据复制方向及拓扑构造完全由激活的配置文件来打算，用户可以依据实际应用的需求，自有的进展定义，没有任何限制，同一系统既可以作为源系统也可同时作为目标系统。这对于当前日益简洁的应用系统来说无疑是一个最正确的解决方案。数据冲突处理机制对于在多生产中心的双向数据同步中不行避开消灭的数据冲突问题， SharePlex 也供给了完整的解决方案，用户可依据实际的业务规律，为数据冲突建立不同的解决方案，如以主

24、站点数据为依据，或按时间戳来处理等，配置灵敏而简便。2.6 数据仓库及决策支持系统应用为了在当今的市场竞争中保持优势，越来越多的公司在建设强健的决策支持系统。SharePlex 为数据仓库及决策支持系统供给了完整的数据抽取、转换和装载的解决方案，并具有一下特点：抽取内容灵敏定义SharePlex 对复制内容的定义格外灵敏，因此用户可依据数据抽取的需要， 选择复制内容，同时，当复制内容有变化时，SharePlex 也可格外便利的修改复制内容。数据的加工处理通常状况下，数据仓库对数据的需求不仅仅是原始数据即可，往往还需要对数据进展确定程度的加工或处理。SharePlex 可以通过在目标端使用存储过程的方式，使用户便利的定义数据的处理流程，完成抽取过程中的数据加工。同时， 使用存储过程，也是用户对数据的处理更加灵敏、便利。准实时的数据复制传统的数据抽取、转换和装载工具依据时间段处理数据而不能进展实时的数据处理，因而决策支持系统就不能真正表达出太大的价值。当前面临的一个挑战就是如 何供给最的信息，而把数据转换为信息就需要对数据进展转换， SharePlex 的准实时数据复制及转换功能无疑将是最正确的选择，用户完全可以从数据仓库 或决策支系统中得到最的统计及决策信息。