[数据交换] 【新功能】智能数据治理平台睿治全新功能上线之数据交换

1569
0

辰哥 管理员

发表于2019-11-8 13:53

楼主
一、数据交换是什么?
数据交换,顾名思义,指的就是“数据”的“交换”。

这里的“数据”不仅仅指数据库的结构化数据,也包括各种半结构化、非结构化数据,包括文本文件、Excel表格、Word文档、XML文件、JSON串、音频、视频等等各类你所能接触到的数据格式。当然,在实际数据管理活动中,我们所管理应用的数据通常都是具有意义的、商业价值的一些数据。

“数据”的“交换”,不仅仅只是数据的交换,其中涉及到很多复杂的问题。比如如何在数据交换时让所有数据受益者免受交换数据格式不统一的烦恼,数据拥有者在自己的数据对外传播过程中如何保障其数据传输和使用的安全性,企业如何对全局多路数据交换过程进行监管等等。

针对企业中数据交换传输和共享过程中存在的种种问题,数据交换管理功能应需而生。

二、睿治数据交换管理有什么特别之处?
1.支持接入多种异构数据源,支持多种主流的数据库、文本文件、Excel文件、API接口、WebService服务等数据形式,屏蔽各系统之间数据类型差异,支持从多个异构数据源取数,能直接完成跨数据库的数据关联取数。

2.丰富的交换组件,提供了丰富的传输组件、文本解析组件、接口组件、转换组件、流程组件等的可视化组件来保证数据交换功能的完整性,还提供了脚本组件保证数据交换平台的扩展性。

3.灵活的交换任务调度方式,支持定时和事件触发,通过检测执行时间,或监听数据库、指定文件变化来触发调度,从而进行数据抽取和交换。

4.安全保障,采用加密传输机制,对数据的传输进行加密,内置大量的数据脱敏算法,支持,对系统和数据的操作行为审计,保证数据的安全性。

5.拖拽式任务设计,可视化监控管理,提供多种内置的监控、统计、分析表样,监控数据交换状态信息,并提供多种告警方式。

三、睿治数据交换管理功能模块简介
1、数据源
产品提供丰富的数据源接口,除支持主流的数据库外,还支持文本文件、SQL结果集、接口数据源等多种形态的数据源。

2、交换任务
交换任务主体功能分两大块,一个是设计区,另外一个是运行区。
运行区和设计区采取隔离机制,保证了运行区环境的安全和稳定,运行和设计不冲突。设计区提供交换任务设计工作,提供了可视化定义交换任务作业信息,支持作业的试运行和断点调试等,丰富的组件支持,能在图形窗口完成数据交换过程的调试,同时可以将设计好的交换任务发布到运行区。运行区提供稳定运行环境,数据交换过程流发布到运行区后,可以设置调度任务,由服务器在后台自动执行。

计区提供丰富的交换组件包括:表交换输入组件、表交换输出组件、批量交换表、批量交换到文件、文件传输代理、文件交换表输出、SFTP下载组件、SFTP上传组件、加/解密组件、表输入输出组件、SQL组件、平面文件输入输出组件、WebService接口组件、HTTP接口组件、XML解析、JSON解析组件、表达式组件、聚合组件、连接组件、清洗组件、脱敏组件、各类数仓组件如维度转换组件、行列互转组件、拉链表组件等,脚本组件如SQL组件、Shell组件、存储过程组件等,数据统计分析组件如采样组件、字段统计组件、哑变量组件、主成分组件等等。

3、任务调度
包括事件管理、调度管理、任务查询功能模块。事件管理主要是定义交换任务调度触发方式,可设置库表监听事件、文件监听事件。调度管理主要用于配置作业的计划执行时间,作业只有在配置的调度时间达到后才会出发作业的执行。任务查询模块提供任务查询和导出功能。

4、运营监控
提供系统概况统计,展示系统使用人数、登录次数、资源访问情况等。
交换任务概览,统计当前任务运行数量、当前任务运行时间、今日完成任务数量(包括当前任务完成表行数)、剩余任务数量和今日异常任务数,并且按照不同的周期统计出该周期任务运行数量和异常任务数,并以各种统计图来展现。
系统占用监控,统计某一天的各个时间系统的cpu占用率、活动连接数、内存占用率。
提供元数据变更订阅功能,当元数据发生改变时通知到用户邮箱,帮助企业及时掌握数据库的元数据动态。

5、系统管理
重要功能模块包括:
系统公告,对系统公告进行管理。管理员可以添加、删除、修改公告。
连接池管理,显示产品系统连接池。
备份与恢复,提供数据备份的功能,防止系统因意外中断而发生数据丢失,数据备份内容包括所有作业的配置、模型配置、交换任务配置等,支持完整或部分备份,同时对备份的文件进行恢复的时候可以进行选择性的恢复操作。
性能与维护,性能与维护,是服务器管理的一个非常重要的部分,这里包含了各种服务器信息和日志信息,以及工作目录系统维护等功能,是服务器状态查询与维护的平台。

四、睿治数据交换管理相关截图
1、数据源
提供多种数据源支持,包括数据库、文件、接口等。

2、交换任务
提供交换任务和交换任务流设计和发布功能。上图为任务设计界面。

3、任务调度
调度管理主要用于配置作业的计划执行时间。

*****************************
一、更多产品功能可点击以链接进行了解
二、感觉很有用,想试用该产品:
立即申请试用资格(拨打400-0011-866转0)开启实战之旅。
如有任何问题可以私信辰哥,或者直接加小亿微信esensoft001进行交流。
*****************************





最近看过此主题的会员

dora232

暗之天使

esen_4QFSIJHDQX

liulei6511

chenzyd

zhouzhou1205

sanjin

ddb

zxw

esen_4IPYIJOYI09S

杨凯

zzqujw

zhaojinjin

yuchangjie1994

7758521

0个回答

只看楼主

登录后可回答问题,请登录注册

快速回复 返回顶部 返回列表

小时

全天响应

分钟

快速处理问题

工程师强势助力

明星产品
解决方案
联系合作

渠道咨询电话:137-0120-6790

技术支持QQ:400-0011-866(工作日9:00-18:00)

产品建议邮箱yixin@esensoft.com

关注我们

扫TA学习更多干货

一对一专家交流

版权所有© 2006-2024 北京亿信华辰软件有限责任公司 京ICP备07017321号 京公网安备11010802016281号