智数ETL工具

智数ETL产品分三个部件:

一、ZS/CDC数据分发中心:

数据抽取加工子系统,通过BI数据分发中心可以把业务源数据增量或全量数据抽取落地成文体文件后快速加载,为后续模型提供来源数据,通过图形化界面可以灵活 配置各种抽取方式和加密字段。图形化灵活开放的配置模式,数据抽取数据快,完全基于源数据API实现,流水化作业方式-抽取和转载,功能权限控制,配置元数据管理 接口,分布式数据导入导出,接口扩展性好。

产品优势:

ZS/CDC分发中心通过自已独创的数据抽取接口且多进程并行抽取技术进行源数据抽取工作,使整个ETL作业开始运行时间前移,为后续数据中心的应用数据能够很快 地提供给用户。

二、ZS/GSQL 通用SQL

混合数据仓库系统,自定义Sql标准,混合数据仓库系统是专门为跨多种数据平台和以后数据迁移服务,它面向开发人员具有开发周期短,上手容易。通过本系统企业还 可和其它程序进行无缝结合,从而实现复杂的ETL处理逻辑。在实际开发中,用混合数据仓库系统可以利用目标数据库自带的一些分析函数功能实现数据分析处理。我们这 套系统的目的:用一套代码实现跨平台和异构数库。BIGsql支持数据库5种数据库: Oracle、DB2、Teradata、Greenplum(PostgreSQL)、Sybase IQ (Sybase ASE)、Hadoop

产品优势:

ZS/GSQL支持多种异构数据源,在多种数据库中能够实现所有一套代码不用作任何修改就能运行并且可以保证实现的功能和最终数据一致。通过BI Gsql为企业解决了数 据迁移过程中大量程序程序代码修改的难题,减少了人力、财力投入。系统中所有清洗转换代码开放,可自定义根据业务逻辑进行修改,对一些业务经常发生变化的互联网企 业提供了帮助。

三、ZS/Scheduler调度中心

ZS/Scheduler调度中心完全基于java技术进行开发,可以无缝集成到门户平台中进行统一访问使用,支持多种调度机制,如按小时、周、月年进行配置。在调度系统中 内置了多种调度监控通知机制和实时查询监控。在调度配置方面,可以和数据仓库业务主题结合起来,按主题进行流程划分管理,这样整个调度流程业务边界清晰,所有调度 配置元数据可以通过元数据管理平台进行查询,对整个调度系统可以支持手工命令进行管理。支持统一界面监控、代码管理、易扩展、JOB工作管理、统一认证管理、分布式 系统环境。

产品优势:

ZS/Scheduler 调度管理界面清晰简单明了,用户操作简单,多种调度监控通知方式方便开发和运维人员进行日常流程问题排查和作业程序跟踪。通过用户拖拉方式程序图标 和箭头即可实现整个业务流程的配置,无需进行编译。所有配置提供元数据接口,方便企业进行元数据采集和管理。

版权所有 © Copyright smartdata360 Inc. 粤ICP备14003701号-1

                  法律声明 | 使用说明 | 联系我们