TurboDX 新一代ETL技术产品

复杂技术简单易用化  为您量身定制数据交换整合系统

 

TurboDX 简介

       TurboDX 提供元数据目录、异构数据库复制、实时同步、交换整合、ETL及跨网络远程通道传输服务等集成一体化的功能,可用于数据复制、数据同步、数据备份/恢复、数据迁移、系统数据卸载(off-loading)、ETL、数据汇聚整合、读写分离、数据分发、数据服务、大数据集成(kafka)等应用场景。这些需求功能的解决,过去往往由市场上某个单一的产品提供各别点上的功能,如传统的复制工具,或者某些数据厍厂商如Oracle GoldenGate 、IBM Infosphere CDC、ETL工具等产品方案。这些产品往往价格十分昂贵,配置和使用十分复杂,且难于与其它厂商的产品实现集成。 数贝公司自主研发的TurboDX,采用最新的基于Web、流处理(Stream Processing)和容器(Container)的架构技术,满足各种不同应用场景的统一使用和监控管理需求。复杂技术简单易用化、场景化设计是TurboDX的核心设计思想,用户通过点击几下Web图形化页面操作,就能实现各种数据交换同步/整合的应用场景,并且数据实时性和交换效率高。 

主要功能特点:

       ○ 异构数据库复制同步,包括全量FullLoad和实时增量CDC任务,支持Oracle(RAC)、SqlServer、MySql、MariaDB、PostgreSQL、Greenplum、Vertica、Informix、Mycat、云RDS、DRDS、DDM等MPP数据库、以及大数据平台hadoop、kafka等;

       ○ 异构数据库交换整合任务,支持日志扫描、触发器、标识位、时间戳、全量比对等增量模式,以及对物理表和视图的交换、多表整合;

       ○ 支持表级、字段级及实例级的数据过滤Filter,及数据转换Transformation和各种函数处理;

       ○ 支持BLOB、CLOB等大字段、以及大事务的处理;

       ○ 支持DDL复制及事件处理;

       ○ 支持数据双向复制(双活),以及智能冲突解决策略;

       ○ 支持高效的非结构化文件交换(扩展功能选项);

       ○ 支持半结构化数据文件(txt、csv、excel、json、xml)加载数据库(扩展功能选项);

       ○ 支持大数据hadoop、kafka集成(扩展功能选项);

       ○ 支持按应用系统处理事务的时间次序交换数据,保证业务数据的完整性和一致性;

       ○ 采用多线程内存流处理技术,交换性能高。数据库记录传输可达30000条/s或10M/s,文件传输40M/s;

       ○ 采用完全的B/S图形界面配置,简单易用;

       ○ 可与TurboDX Plus Service 中心构成跨(域)节点的跨部门数据共享交换平台。

 

下载白皮书 >>

系统架构

演示场景

 

 ○    异构数据库全量FullLoad复制任务配置及运行

 ○   Oracle、MySql、SqlServer 日志扫描增量CDC同步任务配置及运行

 ○   异构数据库多表交换整合任务配置及运行

 ○   数据库CDC增量数据注入kafka

 ○   任务自动调度

 ○   任务运行及监控管理

 

 

演示视频 >>

功能特点:

  • 非侵入式(CDC)数据增量获取

    数据库日志扫描的非侵入式(CDC)数据增量获取技术,无需在应用系统数据库端部署任何“代理(Agent)”程序,对应用系统的运行影响降到几乎为零“Zero-Footprint”,这个特性对许多业务核心应用系统是至关重要的。

  • 完全基于B/S用户界面、简单易用

    直观易用的B/S用户界面是TurboDX区别于其它同类产品的重要特色。TurboDX屏蔽了数据交换复杂的操作过程,无需高级DBA或技术人员提供咨询或编写不透明的定制脚本代码,通过点击几步界面操作,就可实现数据交换复制/整合的应用场景。

  • 基于内存流处理技术架构、交换性能高

    国内首创基于Web、内存流处理和容器的技术架构,灵活性可扩展性强,交换性能高。数据库记录传输可达30000条/s或10M/s,文件传输可达40M/s。 TurboDX可以部署于本地或云中,是实现数据中心必不可少的云化工具平台。

  • 支持多种数据交换应用场景 提供图形化的统一监控和日志管理

    TurboDX 可用于数据复制、数据同步、数据备份/恢复、数据迁移、系统数据卸载(off-loading)、ETL、数据汇聚整合、读写分离、数据分发、数据服务、大数据集成(kafka)等应用场景,并满足各种不同应用场景的统一使用和监控管理需求。 

  • 支持远程安全通道服务 WAN传输加速

    利用安全的远程通道服务,可实现跨网络节点之间的安全数据交换,并可以与第三方数据通道如MQ服务对接。TurboDX采用数据压缩、WAN多线程传输加速技术,实现跨网段的高速数据交换。

  • 采用先进的数据虚拟化和元数据技术

    采用先进的数据虚拟化(Data Virtualization)和元数据(MetaData)技术,实现对数据的梳理、元数据目录、数据查看分析、数据整合视图,形成数据资源目录管理和数据交换的统一管理和应用"一张皮”。


版权所有©️2016  北京数贝软件科技有限公司    京ICP备14032596号