ODS数据管理平台
系统目标
统一规范操作数据模型,整合已有数据,建设统一的数据交换及处理平台
建立一体化的数据服务机制,实现数据服务的提供、管理、发布和使用功能,支持技术扩展和业务应用的快速判断
减少各业务系统数据之间的传输环节,提高数据使用效率,实现业务数据的主题维度规划,提高数据共享效率
统一实施共性沈阳小程序开发
的数据加工活动,减少基础设施应用的重复开发,提高整体实施效率,降低整体开发成本。系统架构
数据平台主要由以下几个部分构成:
数据采集层
是指把业务数据从各个业务系统如核心业务系统、财务系统、信贷管理系统的数据进行抽取,并装载到ODS的过程。
数据处理层
数据处理层是数据平台的核心部分,部署了数据下发系统。下发数据根据用户的订阅信息,定期生成数据文件。 下发数据系统提供用户身份认证、权限验证、数据源过滤和下发数据任务管理等功能,根据下发数据任务执行频率,定期查询ODS数据库,根据查询结果集,生成指定格式的数据文件。
文件传输层
作为数据平台上,各应用系统间信息交换的“高速公路”,通过部署于该层的文件传输系统,向应用系统提供安全、便捷、高效的文件传输。
数据应用层
位于数据平台的顶层,部署有数据管理台。凭借数据管理台的强大功能,实现对下发数据的深度加工,形成高度定制的业务数据,应用于市(县)数据库中,为各级网点应用系统提供数据支持。
系统作用
1. 隔离业务系统和应用系统,降低数据交换的复杂性和风险
2. 转移部分业务系统细节查询的功能,减轻业务系统的查询访问压力
3. 全面覆盖各业务系统,形成统一优质的数据中心
4. 建立数据标准,提供统一的业务数据口径
系统特点
1. 自主研发的高效ETL工具
2. 全面的元数据管理,包括业务元数据和技术元数据
3. 面向主题的汇总层设计
4. 提供多种的访问方式,方便各种应用系统接入
5. 高效便捷的文件传输平台
6. 友好美观的数据管理平台
7. 科学的数据库设计,充分高效利用数据库特性
8. 灵活的扩展设计,满足多变的业务需求
9. 完备的系统安全设计
ETL工具简介
优秀的ODS系统离不开强大的ETL工具的支持,公司自主研发的ETL工具,快速高效,主要支持以下功能:
自动调度
支持批处理和任务流
异常处理
任务重启
数据质量检测
性能监控
记录日志
发送通知
支持主要Unix类操作系统和Linux操作系统
支持Oracle和DB2数据库
“沈阳软件公司”的新闻页面文章、图片、音频、视频等稿件均为自媒体人、第三方机构发布或转载。如稿件涉及版权等问题,请与
我们联系删除或处理,客服QQ:55506560,稿件内容仅为传递更多信息之目的,不代表本网观点,亦不代表本网站赞同
其观点或证实其内容的真实性。
热门文章
使用“扫一扫”即可将网页分享至朋友圈。