《第八章技术规格书.docx》由会员分享,可在线阅读,更多相关《第八章技术规格书.docx(22页珍藏版)》请在第一文库网上搜索。
1、第八章技术规格书1.1 项目背景交通运输部海事局为推动海事信息系统顶层设计的落地,在2014至2016年先后启动了智慧海事一期、二期实施总集成项目及各直属海事局的智慧海事与二级数据中心项目建设,形成了以上海一级数据中心(与部局数据中心互为灾备)以及各直属海事局二级数据中心为基础的海事系统数据中心架构,也为深圳海事局二级数据中心的建设奠定了良好基础条件。深圳海事局于2017年完成了深圳海事局二级云数据中心完善工程(2018-2023)的立项工作,在2018年先行完成了数据中心硬件基础部分的建设,为深圳海事局二级数据中心的建设奠定了基础。在此背景下,为更好地建设深圳海事局的二级数据中心,提高数据支
2、撑与应用服务能力,本项目依托深圳海事局现有的二级数据中心硬件架构,根据海事信息系统顶层设计及技术规范的有关要求,进一步完善二级数据中心的支撑软件系统,同步开展二级共享主数据库的建设工作。1.2 建设目标和内容8. 2.1建设目标在深圳海事局二级数据中心现有基础设施条件下,升级完善深圳海事局的数据管理平台,构建海事共享主数据库;完成主要业务系统间的数据共享和交换,减少数据重复录入的工作量和误差,支撑深圳“智慧海事”建设,全面发挥数据中心的核心驱动作用;试点通过平台进行业务系统间的业务协同,提升整体海事管理效能;构建基础的大数据展示、分析、挖掘功能,为深圳智慧海事建设提供有力支撑。9. 2.2建设
3、内容根据项目建设目标,结合深圳海事局二级数据中心的现状,本项目的建设内容包括二级数据中心管理平台完善、数据工程与配套标准规范制定、软件模块购置三部分。1、二级数据中心管理平台完善二级数据中心完善功能包括数据中心管理平台架构功能完善,主数据治理模块建设、数据管控模块建设、业务协同服务管理、海事大数据应用建设等五部分。2、数据工程与配套规范制定本部分包括深圳海事局主数据库建设、数据共享交换服务平台建设、深圳海事局数据标准规范编制等三部分。3、软件模块购置根据深圳海事局数据报表制作、数据统计和大数据分析展现的需要,购置轻量化的商业B1报表工具一套,授权50用户,其余软硬件支撑由深圳海事局二级数据中心
4、现有资源提供支持。详细建设内容见下表:序号项目名称单位备注*完善数据中心管理平台基础架构1数据交换层完善模块项针对深圳海事局二级数据中心的现状,在数据交换层完善相应功能。如ET1、交换中间表、OSB等。2数据存储层完善模块项完善贴源数据区、MDM数据区、协同数据区、大数据处理区及数据集市区等五个区域的数据存储层。3数据处理层完善模块项建立数据索引、数据特征分析和处理。4数据备份完善模块项构建MDM数据区、协同数据区的数据备份数据库。二主数据治理模块5主数据管理项包括主数据定义、主数据维护(变更维护、版本完善)及主数据情况展示等功能。6数据质量管理项主数据质量监控配置、数据质量监控、数据质量评估
5、、质量数据采集、数据质量问题处理等功能。7数据处理过程管理项管理数据整个处理的过程,包括数据采集调度、数据清洗转换规则定义、数据整合任务调度等。三数据管控模块8数据申请审批管理项包括数据权限管理、数据申请、数据审批等功能。9数据服务管理项包括数据服务状态监控,服务异常查询统计、分析。10数据库监控管理项主要包括一级数据中心共享库下发数据(OGG),本级关系型数据库OraCIe以及MySQ1数据库的实时监控。11数据全生命周期管理项对数据来源、去向进行查询统计。12数据库查询项通过共享主数据(主键)即时查询所有在库的数据。13数据资源管理项包括目录编目管理、目录注册管理、目录发布、目录维护、查询
6、等功能。四业务协同服务管理14业务协同服务配置项对相关系统间的业务协同服务进行配置,支持自定义方式配置系统间协同服务的参数信息。15水工审批信息协同应用项在部海事局的水工审批数据下达到本级数据中心后,平台自动将水工审批数据推送到监管服务平台,监管服务平台将其自动生成相应监督检查的执法任务。16执法结果公示告知项执法任务的结果生成后,自动推送到深圳局公共信息平台,公共信息平台主动以各种方式通知行政相对人。五海事大数据应用建设17固定报表统计与展示项通过报表工具实现预定义报表的自动生成和发布。18业务数据多维展现项按照执法类型分类、执法对象分类、执法事件时间维度、执法人员分类、执法结果按类型分类,
7、五个维度进行图形化展现。19维度数据配置管理项提供维度配置管理功能以便实现多维数据展示功能。20主题数据分析展现项根据业务需要,按照业务主题(场景)对数据进行分析、计算、挖掘,利用G1S数据展示等手段,进行融合展示、因果分析、关联因素分析、危险预警、趋势预测。六主数据库建设项包括数据资产梳理、海事基础数据、海事业务数据、海事业务数据的建模建设。七数据共享交换服务模块项依托二级数据中心提供的管理平台功能和汇聚的数据资源,建立数据共享交换服务模块。八深圳海事局数据相关标准规范制定项在构建的深圳海事局共享主数据库标准的基础上完成数据相关标准规范和管理规定的编制工作。九报表工具套根据深圳海事局数据报表
8、制作、数据统计和大数据分析展现的需要,购置轻量化的商业BI报表工具一套8.3总体建设要求本项目需要在深圳海事局已建成的二级数据中心的基础上,进一步加强数据的汇聚整合、统一管理、数据治理、分析挖掘和大数据应用服务,构建基础性的数据管理与服务平台。按海事信息系统顶层设计的要求,建立深圳海事局的共享主数据库,为深圳海事局及其下属分支局的业务系统提供支持。8.3.1总体架构要求数据中心管理平台分为数据采集、清洗整合、共享交换、业务协同、数据管控、分析挖掘与展示等多个内容,共分为“五层、两体系”:(1)数据生产层:是指内、外部各业务应用系统及其所产生的数据。在本项目中,数据生产层主要负责给大数据软件平台
9、提供原始数据,同时这些业务应用系统也是平台的用户与消费者。(2)数据交换层:用于进行数据的采集、共享和交换,主要包括OSB总线、数据访问接口、交换中间表以及ET1工具。(3)数据处理和存储层:用于处理和存储数据,主要包括贴源数据区(ODS),协同数据区、大数据处理区、MDM数据区(数据仓库)、数据集市区,以及相应的ET1工具;及流程引擎、协议转换、字典对照、访问控制模块;和对外服务的数据访问服务及发布订阅等服务。(4)数据治理管控层:用于向数据管理者提供数据治理和管控的能力和应用。主要包括数据标准及规范管理、数据资源管理、数据处理过程管理、数据质量管理、元数据管理、主数据管理、数据监控、数据审
10、批管理、数据服务管理、数据生命周期管理。(5)数据应用层:用于向业务用户和管理用户提供一系列的基于大数据软件平台的应用功能,包括业务协同管理,数据报表、GIS数据展示(大屏)、多维数据展示、全文检索、主题分析等功能。(6)标准体系:贯穿本项目建设的所有过程,其内容包括:标准的制定与完善、遵循标准的平台及对接系统的开发和改造、遵循标准的实施和联调、遵循标准的管理等。(7)安全体系:安全体系包括物理安全、网络安全、数据安全、制度安全等多个方面,本项目涉及的有数据存储安全、数据传输安全、数据访问安全三个方面。8.3.2系统总体部署本项目建设的软件管理平台采用集中部署的方式,部署在深圳海事局中心机房,
11、通过海事专网与部海事局一级数据中心进行数据对接。本项目建设的软件管理平台与深圳海事局自建系统基于海事内网进行数据交换,深圳海事局及辖区各分支局用户通过海事内网访问和使用系统功能,相关系统通过海事内网实现数据共享协同。8.3.3系统工程边界深圳海事局目前已经初步完成二级数据中心的基础建设,为本项目的实施提供了基础条件,本项目是在该工作基础上的完善工程,重点侧重基础软件管理平台的完善。8.3.4系统性能要求8.3.4.1系统可用性需求为支持深圳海事局海事业务系统的正常运行,需要二级数据中心基础软件管理平台提供稳定可靠、高可用的数据服务,具体要求如下:(1)7X24小时稳定运行;(2)有效工作时间:
12、99.99%;8.3.4.2系统响应时间需求考虑到不同类型用户对响应时间的忍耐程度,确定数据检索、回写、统计等服务的平均时间应满足以下要求:(1)登录时间W3秒;(2)页面间跳转时间W3秒;(3)精确查询(包括请求服务)响应时间W3秒;(4)模糊查询响应时间W5秒;(5)全文检索、综合查询响应时间W5秒;8.3.4.3系统并发用户需求考虑到本项目用户主体的特殊性,即仅限于深圳海事局科技信息处、机关业务部门及分支局等,因此系统的并发用户数应三100。8.3.4.4系统可扩展性需求本项目作为深圳海事局信息化的核心建设内容,是深圳海事局信息化建设的重要基础,二级数据中心在满足部海事局数据中心建设要求
13、的基础上,需要建设具有较高可扩展性,较好灵活性和开放性的软件架构,以满足部海事局信息化顶层设计的相关要求,并为深圳海事局各类业务应用扩展和功能深化建设提供便捷、可靠的支撑,同时方便外部相关系统的衔接与数据交换共享。8.3.4.5系统安全性需求本项目数据交换共享内容涉及船舶、船员等大量涉及海事管理信息安全,应按照信息安全保护二级要求,进行相应的边界保护。8.3.4.6数据抽取性能需求(1)平均抽取效率:N3000条/秒;(2)数据一致性:单次抽取任务错误率WO.05%;(3)数据更新效率:5000万级以下数据表W1天,5000万级以上数据表W2天。(4)更新周期:全量业务更新W7天,增量更新W2
14、小时或者用户定义的时间间隔。8. 3.5技术路线要求为落实海事信息系统顶层设计,应用系统的开发必须遵循既定的SOA体系架构,J2EE应用开发技术架构、海事网络信息体系等顶层设计的技术路线要求,基于上述统一的支撑架构进行开发。8.4二级数据中心完善要求深圳海事局的二级数据中心管理平台是对深圳海事局辖区内的数据汇聚、管理、监控及应用的可视化管理与展示平台,本项目包括数据中心管理平台基础架构完善、主数据治理模块建设、数据管控模块建设、主数据模块建设、数据共享交换平台建设、大数据应用建设等内容。8. 4.1完善管理平台基础架构基于开放式的技术基础架构,进一步完善数据中心管理平台数据交换层、数据存储层、
15、数据处理层的相关功能,使数据中心能够与多种工具集成,具备数据采集、清洗、转换、整合、存储、分析和共享交换基础和能力,从而形成深圳海事局的大数据分析应用基础架构。9. 4.1.1完善数据交换层功能针对深圳海事局二级数据中心的现状,在数据交换层完善相应功能,建立开放式的基础平台框架,完善ET1工具、建立交换中间表及完善OSB服务总线等功能。1完善优化ET1工具通过部署开源ET1工具,开展二次应用开发,实现对部局下发数据、外部系统数据、本地应用系统数据进行有效采集、抽取、转换、加载,对数据源数据结构进行整合并关联,并将采集的数据存储在贴源数据区。ET1工具需能够集群部署,能够支持任务调度。2 .建立交换中间表针对无法进行改造的业务系统,其数据交换共享需要通过交换中间表进行,即根据数据交换共享的业务要求,建设交换中间表。3 .完善OSB服务总线服务基于OraeIeSerViCeBUS产品构建,主要用