编辑: 丑伊 | 2019-08-02 |
1 公共数据交换与共享平台 精华公共数据交换与共享系统V2.
0(包含精华数据标准、JH iPaaS数据集成与交换管理系统V1.
0、大数据挖掘分析系统V1.
0、主数据管理系统V1.
0、元数据管理系统V1.
0、JH数据质量管理平台V2.0) 中国郑州 公共数据交换与共享平台建设 数据标准建设 数据标准建设目标 精华将在本次项目建设中建成符合国家、教育部和行业标准的、适合学校信息化建设的规范体系,逐步建立和完善有关信息系统建设的各项规章制度和规范,让信息化建设落到实处,做到有章可循,有序建设,从而从制度上保证整个系统的标准化、可扩展性、支持互操作,保证信息化工作的顺利进行. 套11000000
1000000 3年 数据标准建设整体设计 数据标准建设将基于元数据管理思想进行,满足以下内容: 标准的兼容性:该 标准 的实施对各职能部门信息系统建设、信息的交流与共享、数据的收集、分析、发布都有着十分重要的意义,因此所采用的信息标准可与国家标准、教育部《教育管理信息化标准》等信息标准相兼容;
标准的可扩性:随着信息化进程的发展,信息标准是一个及时更新、不断充实的动态系统;
提供能够灵活调整信息标准的管理和维护工具;
标准的规范性:即在一个信息编码标准中,代码的结构、类型以及编写格式统一;
标准的唯一性:即虽然一个编码对象可有很多不同名称,也可按各种不同方式对其进行描述,但是,在一个分类编码标准中,每一编码对象仅有一个代码,一个代码只唯一表示一个编码对象;
标准的适用性:即代码尽可能的反映分类对象的特点,便于应用. 数据标准建设内容 精华将会针对本项目建设符合学校实际需求的校级数据标准规范,数据标准的建设将基于国家标准、教育部《教育管理信息化标准》,并结合学校现状,进行编制,具体包括元数据标准、信息编码规则、代码集标准等,具体如下: 元数据标准 元数据标准将依照覆盖学校管理涉及到的数据子集、数据类、数据子类为总原则进行编制.数据子集涵盖但不限于学校概况、本科生、专科生、人事、科研、财务、资产、办公、档案、图书等学校管理的主要方面. 子类之下的数据项包括:编号、数据项名、中文简称、类型、长度、可选、取值范围、说明/示例、引用编号等. 代码集标准 本次代码集编制将按照代码集覆盖的范围涵盖学校概况、本科生、专科生、人事、科研、财务、资产、办公、档案、图书等学校管理的主要方面的总体原则进行. 具体的代码集包括代码范围、规范性应用文件、术语和定义、代码编制规则、特殊编码方式. 代码管理规范,包括代码使用规范,代码转换标准,代码纠错步骤等. 编码规则 在本项目中编码规则的制定将依照:每一项数据编码应由三部分组成:规则、定义、说明的总体原则进行. 建设将根据学校的实际情况,梳理需要编制代码表的业务主题,分析现有编码体系及存在的问题,在兼容历史、面向未来的整体思路下,编制编码规则. 应用标准 建设应用标准,通过信息标准体系建设,确定今后学校的业务系统建设标准及对接标准,促进遵循标准的应用能够方便地集成. 建立数据标准的使用规范和日常管理、维护流程,用于各业务系统之间进行数据共享和交换,便于逐步实现所有业务系统数据的准确性和一致性. 公共数据库建设 公共数据库建设目标 本项目中公共数据库是校园内搭建的一个面向应用、安全可靠、操作便捷、技术先进、规范统
一、灵活可扩展的数据平台,通过数据集成工具,进行数据过滤、清洗和双向传递,实现各业务系统、公共数据相互之间的数据交换和共享. 精华公共数据库的建设目标如下: 形成统一的全校信息编码. 在遵循 谁产生、谁维护 的原则下,保障系统之间可以基于一种安全、可管理的模式进行数据共享. 通过本次建设为学校的综合查询和决策支持所需的数据信息建设打下良好的基础. 公共数据库建设内容 针对原有业务系统对应的公共数据:来源于现有业务系统的数据,经数据整合将原有数据进行标准化处理后入库,并按需求保持与原有业务系统中数据的同步. 针对与公共数据库兼容的业务系统或按照数据库接口标准开发的系统来讲,都可以直接基于公共数据库运行. 公共代码库是基于国标、部标和校标,对全校的代码进行统一的存储及管理,能进行统一管理并具有批量处理功能和代码纠错功能. 数据集成与交换管理系统建设 数据集成与交换管理系统建设目标 本次的数据集成与交换管理系统是利用现代信息技术和网络技术,依托现有的网络基础资源,遵循安全、高效、可靠的数据交换标准和规范,搭建的数据交换共享平台的基础架构,主要用于解决校内各业务系统之间的数据共享和集成问题,为各业务系统提供全局视图、全局数据权限视图和数据交换服务,解决校内诸多业务系统的信息孤岛问题;
同时,围绕各级部门的业务协同,以部门业务数据信息为基础,确定部门间交换信息指标及信息交换流程,实现不同部门之间异构业务系统松耦合的信息交换,形成部门间信息资源物理分散、逻辑集中的信息交换模式. 系统可实现校内的各种异构数据源的无缝接入,为建设全面反映学校教学、科研工作以及师生员工工作、学习和生活的相关数据库打下扎实基础,这些数据既高度集中、又安全可靠,为该项目的建设提供可共享的数据支持. 此外,系统还可提供图形化的管理和设计工具,实现数据采集、交换、转换等功能的配置工作,保证系统的扩展部署和快速实施.提供便捷的数据交换任务的配置,通过简单的操作即可实现异构数据源和数据平台的数据同步,减少或无需编码工作.系统可保持良好的扩展能力,面向多种交换场景,支持海量的多种类型数据集成,并具有集群部署的负载能力,总体实现以下几方面目标: 可满足智慧校园大数据的高时效集成;
可满足基于智慧校园大数据的7*24小时的数据应用;
可满足数据集成过程中数据类型多样化、采集方式多样化;
可满足直观便捷的管理操作. 数据集成与交换管理系统整体设计 精华的数据集成与交换管理系统是具有自主知识产权证书的软件产品,并以此产品进行本次投标,投标文件中提供数据集成与交换管理系统的软件产品著作权证书复印件,并加盖厂商公章,具体详见投标文件. 精华数据集成与交换管理系统满足如下要求:l 管理系统基于B/S架构,提供可视化界面,通过浏览器对数据交换过程监控,可以监控数据集成与交换的每个编排服务,查看数据流转情况.对问题故障提前预警,保证交换网络的畅通和安全性;
系统支持服务模块热部署,可保持 7*24 小时稳定运行;
系统以图形管理为主,Web 矢量绘图内核,扩展多种业务图元,比如域、管理节点、交换节点、 数据节点、应用节点、文件节点、发布资源、订阅资源等;
精华交换平台实现 ESB 消息服务总线,基于 SOA 面向服务架构设计;
系统采用多虚拟机架构,充分利用硬件资源,以及负载分流;
交换平台内部通讯采用异步的、事件驱动的网络应用程序框架;
系统内置消息服务中间件,WEB 服务等;
系统提供 CEP 复杂事件处理、对异常情况及时处理;
系统提供交换节点树间路由算法、消息网络图的路由算法;
系统需求调研分析过程的标准化:采用标准的需求调研分析工具,如UC 数据调研分析工具、软件需求说明编制工具等;
精华本系统设计与开发过程标准化:设计与开发按照《GB-T8567-2006 计算机软件文档编制规范》, 采用面向对象的系统设计方法,遵循 UML 设计规范等;
系统运行环境标准化:系统平台支持 Linux 和Windows 平台,管理平台支持 WebSphere、 WebLogic、Tomcat、JBoss 等多种应用服务器. 数据集成与交换管理系统功能设计 面向大数据中心的建设,进行异构数据源的梳理,建立数据通信通道,自动集成其他各个业务子系统的数据信息,并完成实时的数据交互,通过数据交换平台为所有的业务系统提供统一的数据来源,同时对数据交互的过程进行监控;
精华数据集成与交换管理系统支持交换网络的拓扑管理功能,用户可通过 web 矢量化图形化配置交换网络,构建交换平台交换网络,管理网络中各种交换服务.如:管理节点、交换节点、数据节点、应用节点以及各种服务和连接;
系统支持对交换网络的域模式管理,提供域管理模式,对复杂的交换网络,能实现分域管理. 精华系统支持多种数据交换方式,包括:面向数据交换、面向消息交换、面向服务交换、面向文件交换;
面向数据交换 精华的系统可实现 oracle、MySQL、Microsoft SQL Server、Microsoft access、LDAP、IBM DB2 UDB 、IBM DB2/
400、 Sybase AS Anywhere、Sybase AS Enterpriss、Sybase AS IQ 、Progress Informix、Ingres、PostgreSQL 数据库中任意两种数据库之间的数据集成交换工作;
面向消息交换 精华数据集成与交换管理系统支持 Jms Queue、Jms topic 等中间件间的数据集成交换工作. 面向服务交换 精华系统支持 Axis2 Web Service、CXF Web Service 等数据结构及中间件间的数据集成交换工作;
面向文件交换 精华数据集成与交换管理系统可实现 File、Microsoft Excel、csv、xml 等结构化的文件数据的数据集成交换工作.同时可实现 Microsoft word、文件夹等非结构文件的数据集成与交换工作. 精华系统支持数据集成过程的发布订阅管理.可支持一对多的发布订阅模式,实现一点发布,多点订阅,支持数据集成的发布订阅流程自定义编排;
可实现利用交换系统网络资源,对数据集成与交换管理系统中不同数据节点之间进行数据交换;
可提供发布订阅模式,实现数据的一点发布、多点订阅;
系统可支持发布和订阅流程的自定义编排. 精华系统支持对 ETL 过程的全面管理.可实现对ETL服务、集群和转换的管理,实现点对点数据交换、转换和加载.可通过图形拖拽的可视化编辑方式配置 ETL 的流程以及对 ETL 源数据与目标数据的字段映射. 精华提供的数据集成交换产品能适应多种同步场景,包括数据全量同步,保证源表与目标表的数据完全一致;
对于数据增量同步,则只同步变化数据,提高同步效率. 精华系统支持数据集成交换过程中的数据清洗、转换、过滤等丰富的个性化数据处理方式.根据不同的数据库产品,系统还支持源字段到目标字段间同步过程中的聚合、转换、日期和时间转换、字符串转换、数学 运算、JavaScript脚本、XSLT 脚本、SQL 脚本等多种转换方式;
精华提供的平台系统能提供失败补偿机制,在数据交换过程中如遇交换任务执行异常,可根据策略重试运行,保证异常情况数据不丢失;
精华平台提供对数据发布订阅以及ETL转换,支持事件调度;
支持秒级、分钟、小时、周、年、月不同级别的同步频率,支持指定时间区间内不同频率的数据同步;
精华平台提供任务日志审计功能,包括: 可查看发布订阅执行情况,同时支持详细查看发布订阅执行的每一个步骤;
支持查看 ETL 执行情况,同时支持详细查看发布订阅执行的每一个步骤;
可查看 ETL 集群执行情况,同时可以详细查看集群中........