DB5101/T 124.2-2021标准规范下载简介
DB5101/T 12*.2-2021 公共数据资源体系 第2部分:交换技术规范.pdfDB5101/T 12*.2-2021 公共数据资源体系 第2部分:交换技术规范.pdf简介:
DB5101/T 12*.2-2021《公共数据资源体系 第2部分:交换技术规范》是一部标准文档,它由中国地方标准(DB51)发布,属于技术性标准。该标准主要关注公共数据资源体系中的交换技术,它详细规定了公共数据资源在系统之间如何高效、安全和可靠地进行数据交换的规范和要求。
"DB5101/T 12*.2-2021"的"DB"代表地方标准,"51"代表四川省(成都市)的代码,"12*.2"是标准系列号,"2021"表示发布年份。"交换技术规范"部分则明确了数据采集、处理、存储和传输过程中,涉及到的数据格式、通信协议、安全策略、性能指标等相关技术细节。
这份标准旨在统一公共数据资源交换过程中的技术标准,推动公共数据资源的共享和利用,提升数据交换效率,保障数据安全,是公共数据资源管理的重要依据。
DB5101/T 12*.2-2021 公共数据资源体系 第2部分:交换技术规范.pdf部分内容预览:
DB5101/T12*.2—2021
DB5101/T 12*. 22021
5.1成都市公共数据资源交换体系总体框架图
成都市公共数据资源交换主要通过成都市政务信息资源共享应用管理平台(以下简称“市共享平 ”)的交换与级联功能进行实现,交换功能主要实现成都市市级政务部门、区(市)县间的数据汇集 共享,级联功能主要实现与省级、区(市)县级共享交换平台间的数据汇集与共享,成都市公共数据 源交换体系总体架构如图1所示,其中: 一市级政务部门主要采用数据库、文件系统、服务接口三种交换方式实现数据交换;市共享平台 的主要由功能系统和数据资源组成; 市共享平台与四川省政务信息资源共享平台通过级联方式实现数据交换,其交换技术要求可参 照四川省政务信息资源共享平台相关要求执行; 区(市)县无自建平台的,采用数据库、文件系统、服务接口三种交换方式实现数据交换: 区(市)县有自建平台的,通过级联方式与市共享平台实现数据交换; 本标准未约定的交换方式,可参照现行国家、行业标准执行。
湘2017G10* 装配式混凝土框架结构示例--框架结构图1成都市公共数据资源体系交换体系总体框架
DB5101/T 12*.22021
成都市公共数据资源体系交换方式主要包括以下三种: a)数据库交换,适用于市级政务部门和使用市共享平台的区(市)县采用数据库表进行数据共享交 换; b)文件交换;包括前置机文件共享交换和文件系统共享交换,主要适于采用文件系统(如FTP等) 进行数据共享交换; c)服务接口交换:主要适用于采用服务接口(如API等)进行数据共享交换,
5. 2. 2 功能模块
成都市公共数据资源体系交换共享过程中主要的功能系统包括: a)管理系统应具备管理交换共享过程、受理审核共享流程、监控共享交换流程等功能; b)适配系统应具备配置各类型的交换方式、用户权限、接口配置等功能; c)交换系统应具备数据库表、文件系统和接口等交换共享方式的功能; d)级联系统应具备支持其他平台接入实现数据交换的功能; e)其他必要的功能系统。
市共享平台数据资源主要包括:原始汇聚库、标准汇聚库、主题资源库、部门资源库、基础资 其他资源库。
数据库交换模式适用于市级政务部 平台进行数据交换的区(市)县。通过市共享平 台,实现市级政务部门、区(市)县两两间的数据表的共享和交换。数据库交换模式如图2所示。
市级政务部门和区(市)县既是数据提供方也是数据需求方,交换过程参考如下: a)数据提供方、数据需求方在市共享平台注册各自的前置数据库; b)数据提供方推送数据到前置数据库, c)市共享平台抽取数据并推送数据到数据需求方的前置数据库; d)数据需求方抽取本单位前置数据库中的数据,
*.2数据库交换模式技术要求
DB5101/T 12*. 22021
效据库交换模式技术要求主要包括资源汇聚、资源订阅、基础配置、传输性能四个方面。
*.2.2资源汇聚要求
资源汇聚要求主要包括:数据源注册、推送、抽取和发布四项。其中: a)注册:数据提供方应在市共享平台注册前置数据库并完成数据源创建(包含数据库实例名、数据 车类型、数据库驱动等); b)推送:数据提供方采用技术手段(如系统工具导入、手动导入等)将数据推送至本单位的前置数 据库中,并应进行及时更新; c)抽取:市共享平台将数据提供方的数据从前置数据库抽取到汇聚信息库; d)发布:市共享平台发布已经建好的数据资源(发布内容应包含资源信息、节点信息、抽取方式、 交换频率、数据表、目录标识等)
*. 2. 3资源订阅要求
已经发布的数据资源,数据需求方可向市共享平台申请订阅,资源订阅要求包括:注册、订阅和抽 取四项流程。其中: a)注册:数据需求方在市共享平台注册前置数据库并查找所需数据资源信息,提出申请: b)订阅:数据需求方在市共享平台查找到对应资源后进行订阅操作,设置接收库表、设置接收库表 与字段间的映射关系,并启动订阅; c)抽取:数据需求方采用技术手段(如系统工具导出数据,手动导出数据等)将数据从前置数据库 获取到业务系统应用。
*. 2. * 基础配置要求
数据库交换模式应满足的基础配置要求如下: a)应适配当前主流的数据库,主要包括国产数据库(如OceanBase、TDSQL、DM8、GBase、EsgynDB )和非国产数据库(如MySQL、SQLServer、Oracle、Sybase等): b)应支持多种数据抽取模式,并且每一种数据抽取模式都可以配置不同的数据抽取频率,抽取模式 括日志分析模式、触发器模式、时间戳模式和标识位模式,其中: 一日志分析模式:通过分析数据库的事务日志来判断、检测增量数据; 触发器模式:通过配置工具在要进行交换的数据表上自动创建必要的触发器,当数据发生变 化时,实时把发生变化的数据进行交换操作; 一时间戳抽取模式:在进行数据交换的数据表上设置一个时间类型的字段,当数据发生变化时 实时将该字段值更新为当前时间,系统会定时扫描发生变化的数据进行交换; 标识位模式:指在进行交换的数据表中设置一个标识字段。 应支持多种触发方式,包括但不限于手动触发与计划任务方式: 1)手动触发:指每一次发生数据交换,都是由数据需求方通过点击启动按钮来完成交换; 2) 计划任务:可指定交换开始执行的时间点(如corn表达式),来完成自动执行数据交换 应支持多种交换策略,包括一对一、一对多、多对一等交换策略。
*.2.5传输性能要求
数据库交换模式分为小量数据 a)小量数据交换 适用场景0~10万条/天!
数据库交换模式分为小量数据交换 中量数据交换和天量数据交换三类,应满足的传输性能要求如 下: a)小量数据交换 适用场量0~10万条/天:
DB5101/T12*.2202
服务器性能最低要求:CPU:*核2.*GB,内存:8GB,硬盘:500GB,网卡:100MB; 数据库性能最低要求:2MB/S; b)中量数据交换: 一适用场景10~100方条/天: 服务器性能最低要求:CPU:8核2.*GB,内存:1*GB,硬盘:1TB,网卡:100MB; 数据库性能最低要求:3MB/S; c)大量数据交换: 一适用场景100万以上; 服务器性能最低要求:CPU:1*核2.*GB,内存:32GB,硬盘:2TB,网卡:100MB 数据库性能最低要求:5MB/S
交换包括前置机文件共享交换和文件系统共享交
7.2前置机文件共享交换
7.2.1前置机文件共享交换模式
前置机文件共享交换模式适用于市级政务部门和使用市共享平台进行数据交换的区(市)县。 共享平台,实现市级政务部门、区(市)县两两间的数据表的共享和交换。前置机文件共享交换 图3所示。
图3前置机文件共享交换模式
市级政务部门和区(市)县既是数据提供方也是数据需求方,交换过程描述如下: a)数据提供方、数据需求方在市共享平台注册各自的前置文件系统,适配的文件格式主要包 信息服务平 括:Excel、XML、CSV、TXT等文件格式; b)数据提供方推送数据到前置文件系统;/ c)市共享平台抽取数据并发布数据资源路径; d)数据需求方查找数据资源路径并申请使用; e市共享平台推送数据到数据需求方的前置文件系统: f)数据需求方抽取本单位前置文件系统中的数据
7.2.2前置文件共享交换模式技术要求
7. 2. 2. 1概述
数据提供方、数据需求方通过前置文件交换模式在市共享平台进行文件交换应满足资源汇聚、 阅、基础配置三项要求。
DB5101/T 12*. 22021
DB5101/T 12*. 22021
7.2.2.2资源汇聚要求
前置文件共享交换的资源江聚主要包括:注册、创建、上传、发布四项。其中: a)注册:数据提供方填报文件资源信息,包括来源系统、更新周期、开放属性、共享属性、资源 描述等; b)创建:数据提供方应在前置信息文件库上按要求创建文件目录; c)上传:数据提供方采用技术手段(如SFTP,FTP等),将需要可共享的文件上传至规定位置,并 按照计划的更新频率对文件资源及时更新; d)发布:市共享平台基于前置文件信息库中已存放的文件资源,发布文件资源,填写内容主要包括 文件夹路径、所属节点信息、抽取频率等,完成文件资源发布。
7.2.2.3资源订阅要求
已发布的文件资源,数据需求方可向市共享平台申请订阅。订阅流程包括:查询、创建目录、订阅 和抽取四项。其中: a)查询:数据需求方在市共享平台查找所需文件资源信息,提出申请; b)创建目录:数据需求方根据文件路径创建文件目录,用于接收文件资源; c)订阅:数据需求方在市共享平台查找到对应资源后进行订阅,确定订阅后并启动订阅; d)抽取:数据需求方采用技术手段(如SFTP,FTP等)将前置信息文件库的文件抽取到本单位业务系 充使用。
7.2.2.*基础配置要求
7.2.3传输性能要求
前置文件共享交换模式应满足的传车 a)32位操作系统:最大支持*GB; b)**位操作系统:大小不限; c)服务器网络带宽最低为100MB/S。
前置文件共享交换模式应满足的传输性能要求如下: a)32位操作系统:最大支持*GB; b)**位操作系统:大小不限; C)服务器网络带宽最低为100MB/S
7.3文件系统共享交换
《印染工厂设计规范 GB 50*2*-201*》7.3.1文件系统共享交换模式
文件系统共享交换模式适用于市级部门和采用市共享平台进行数据交换的区(市)县应用。文件 享交换模式如图*所示。
DB5101/T12*.2202
市级政务部门和区(市)县既是数据提供方也是数据需求方,交换过程如下: a)数据提供方识别文件; b)数据提供方注册并上传文件到市共享平台文件系统; C)市共享平台发布文件资源; d)数据需求方通过市共享平台查找并下载所需文件资源
7.3.2文件系统共享交换模式技术要求
7. 3. 2. 1概述
《房地产业基本术语标准 JGJ/T30-2015》图*文件系统共享交换模式
数据提供方、数据需求方通过文件系统共享交换方式在市共享平台进行数据交换应满足资源 源订阅、基础配置三项要求,
7.3.2. 2资源汇聚要求