数据支撑平台构架图

数据支撑平台产品优势
跨平台
基于Java提供多平台支持(windowslinux,unik等)
大数据适配
提供HBase的输入/输出转换组件,支持与非关系型数据库HBase进行数据交互
丰富的系统适配功能
基于标准的JDBC、ODBC接口,实现对各种主流数据库系统的支持
丰富的组件
大博金内置大量的任务组件和转换组件,用户可以通过拖的方式快速完成各种复杂数据集成需求和集成的调度控制
资源统一存储
资源库为大博金的元数据提供了统一的存储机划,并对元数据提供各种管理功能,同时资源库还为大博金的分布式部署提供支理
字段拆分、混合运算
大博金内置众多的字符串色数,例如SUBSTR。Instr等
图形化界面、快速开发和部署
大博金内置大量的可视化图形转换组件,是完全图形化的开发产品,无需在组件上编写脚本语言,即可实现数据集成的快速开发和部等
高效数据处理
大博金采用并行处理的方式实现数据的高效处理,数据在大博金中类似于流水线上的产品
准实时数据接入
与传统的数据同步技术不同,大博金基于数据库日志文件(包括归档日志和重做日志)来实时抽取数据,延迟最低5秒
异常恢复
任务流程提供多个调度机制和异常恢复机制,在异常后,支持自动和手动恢复
数据完整性和一致性保证
提供按批次抽取功能,并为每一批次数据提供整体事务的控制,一旦出现异常,可以从数据处理的中间状态进行恢复,并保证数据的最终完整性和一致性
多种抽取模式
基于数据库日志分析的各种数据拍取模式,如全量同步,增量同步COC,单间同步、双向同步,文件目录同步等
插件式组件管理
提供栖件式的组件管理机制,对于特殊的场量(如客户自定义结构的文本)可以方便的
支持集群化配置
大博金系统内的数据集成引擎可以集群方式部署在多个服务器或者虚拟机上,统一使用一个监控配置器,监控配置器可以监控整个数据集成集群内各个引聚上所有数据集成服务的进行情况
数据支撑平台应用场景
多源异构数据集成
业务系统众多,系统间彼此隔绝,形成数据孤岛难以提供全局的、有效的决策支持信息。
数据清洗与转换
存量数据巨大,但提供方式多样,数据标准不统一,数据质量差,难以流通 和利用。
多业务系统数据交换
新老业务系统不断融合,对系统间互联互通、共享交换、业务协同等多方面需求愈发强烈。
数据支撑平台产品功能
