当前位置:主页 > 新闻资讯 > 行业新闻 >

潮数技术分享系列(二):数据库同步系统

时间:2023-01-11 22:15

爱游戏app - 手机版下载

本文摘要:结构化数据 是指可以使用关系型数据库表现和存储,体现为二维形式的数据。一般结构化数据生存在数据库中,做好数据库的同步、备份对于掩护结构化数据是十分重要 的。产物先容数据库同步系统是基于数据库日志捕捉、剖析、通报、加载技术的数据实时同步软件。数据库同步系统提供了同构漫衍式Mysql,Sql Server 数据库,HP 列式数据库Vertica,Teradata 数据堆栈,国产数据库及任何支持JDBC接口的数据库。

爱游戏app下载

结构化数据 是指可以使用关系型数据库表现和存储,体现为二维形式的数据。一般结构化数据生存在数据库中,做好数据库的同步、备份对于掩护结构化数据是十分重要 的。产物先容数据库同步系统是基于数据库日志捕捉、剖析、通报、加载技术的数据实时同步软件。数据库同步系统提供了同构&异构情况下低影响的数据同步功效。

增加了实用且重要的功效,降低了数据库同步产物对生产系统的影响,扩展了数据库同步产物的使用场景和规模。功效先容在线日志剖析: 数据库同步系统通过在线分析事务日志获得SQL语句和数据,完成DataBase级别schema 级别或table级此外数据复制。数据库同步系统对日志的整合和传输以“事务”为单元,无需处置惩罚庞大的“回滚”机制。

使用该技术,在拥有高性能的同时还能够更好的保证数据复制的一致性和完整性。在线数据迁移: 数据库同步系统迁移数据时无需停止业务,通过SCN号控制机制,完整地将生产服务器数据复制到备份端服务器。可在7*24小时运行的业务上完成宁静的、高性能的数据迁移事情。

中文图形监控治理报警: 数据库同步系统具有一个完整的监控客户端,可利便地监控软件的运行,系统资源占用等状态,而且可以对软件举行设置修改,不需要去设置庞大艰涩的设置文件。数据库同步系统还提供了字符操作模式,通过两种方式都可以对数据库同步系统举行日常维护和监控,满足了差别用户的使用习惯。数据比对修复: 数据库同步系统在数据同步历程中可以用一条下令对实时同步的数据举行数据比对验证,将逐行逐字符地比对生产数据库和备份数据库的内容,并在数据库同步系统Agent(客户端)形成可读的txt陈诉文件,以便直观地检察数据比对效果。备份数据库数据回滚: 数据库同步系统Agent 客户端会过滤生产数据库举行的Truncate,Drop,Delete操作,将遇到这些操作时,数据库同步系统Agent不会真正的删除数据,而是将该表Rename(重命名),使其酿成数据库中的一张隐藏表,在需要时可以恢复表中数据。

爱游戏下载

历史数据库归档: 数据库同步系统历史数据库归档技术的主要目的是淘汰生产服务器的查询压力,历史数据库归档技术借助数据比对和数据验证方式,来验证主生意业务数据库和热容灾数据的历史数据库数据完全一致。数据验证完成后,可以Truncate掉主生意业务数据库的历史数据库数据而保留备份服务器的历史数据库数据,备份服务器始终处于OPEN状态,可以举行实时的查询。数据抽取转换加载: 数据库同步系统ETL(Extraction Transformation Loading)数据抽取、转换、加载技术可以实现生产服务器和备份服务器数据类型的转换,SQL语句的过滤等功效,满足数据清洗需求。

跨数据库数据转换集成: 数据库同步系统能够将生产数据库的实施实时同步到informix数据库和Teradata数据库堆栈中,能够在不修改当前业务系统的结构情况下,解决跨数据库平台的数据转换需求。应用场景作为报表数据源: 备用数据库Open状态,可读写,可供大部门报表使用。作为抽取数据源: 备用数据库Open状态,可读写,可供数据抽取应用使用。

分管生产系统压力: 备用系统可以分管生产系统40%左右的系统负载。数据库转动升级: 给数据库大版本升级提供业务不中断的能力。提供生产系统可靠性: 通过卸载部门生产压力到备用系统显著降低生产系统生成压力,制止高负载在极限情况下可能造成的异常事件,而且为保障单点SLA能力,主系统在灾难情况下能接受所有业务压力。网络资源复用: 由于基于变化量的传输机制,网络带宽耗用仅传统方案的1/10,通过复用机制可提升网络资源的使用率。

爱游戏app下载

业务拓展需求: 通过在线增加备用节点,可以拓展其他业务使用场景,例如联合上线增加和原库相同测试库,并举行回归测试。产物部署方式部署方式,如下图所示:产物优势高稳定性: 数据库同步系统独立于Oracle系统架构,不依赖于触发器,不占用Oracle资源,对生产系统低影响;高可靠性: 数据库同步系统基于Oracle事务复制,只捕捉提交的事务,过滤未提交的事务,保证数据一致性;异构跨平台支持: 数据库同步系统源端支持异构源和目的系统,OS异构支持,DB异构支持,能适应种种庞大情况;高灵活可扩展性: 数据库同步系统开放API,松耦合的模块化架构,易于被集成,并提供定制化开发服务;毫秒级数据延迟: 数据库同步系统在事务开始发生时就捕捉变化数据,事务一提交就马上发送到目的端;支持规模操作系统: Windows全系列、Linux及衍生版本、UNIX;数据库源端: Oracle 9i/10g/11g/12c,Informix,DB2等;数据库目的端: Oracle 9i/10g/11g/12c,MySql &漫衍式Mysql,Sql Server 数据库,HP 列式数据库Vertica,Teradata 数据堆栈,国产数据库及任何支持JDBC接口的数据库。


本文关键词:潮数,技术,分享,爱游戏app下载,系列,二,数据库,同步,系统

本文来源:爱游戏app下载-www.suzhoutaohuashe.com