标准规范下载简介

GB／T 38675-2020 信息技术 大数据计算系统通用要求.pdf简介：

GB/T 38675-2020《信息技术 大数据计算系统通用要求》是一个由中华人民共和国国家市场监督管理总局发布，中国标准化研究院主导制定的国家标准。该标准主要针对大数据计算系统的设计、开发、实施和运行提出了一套通用性的要求。它涵盖了大数据计算系统的架构、功能、性能、安全性、可靠性和可扩展性等方面，旨在为大数据计算系统的开发和应用提供统一的技术规范。

这部标准适用于所有从事大数据计算系统开发、运营和服务的组织，包括但不限于企业、研究机构和政府部门，它旨在帮助企业提升大数据处理能力，保证大数据计算系统的稳定、高效和安全运行，同时也为行业内的技术交流、产品评价和质量控制提供依据。

通过遵循该标准，大数据计算系统的设计和实施可以更加规范化，有助于提高整个行业的技术水平和产品质量，推动大数据技术的健康发展。

GB／T 38675-2020 信息技术 大数据计算系统通用要求.pdf部分内容预览：

国家市场监督管理总局 发布 国家标准化管理委员会

范围 规范性引用文件 术语和定义 缩略语 硬件要求 5.1 硬件组成 5.2 计算单元 5.3 计算加速单元 5.4 存储单元 5.5 高速互联单元 5.6 管理监控单元 5.7 供电单元 5.8 结构及散热单元 软件要求 6.1 软件组成 6.2 操作系统 6.3 虚拟化软件 6.4 资源管理软件 6.5 通信管理软件 网络要求 安全要求

本标准按照GB/T1.1一2009给出的规则起草 请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别这些专利的责任。 本标准由全国信息技术标准化技术委员会（SAC/TC28）提出并归口。 本标准起草单位：浪潮电子信息产业股份有限公司、中国电子技术标准化研究院、北京华胜天成科 技股份有限公司、浪潮软件集团有限公司、上海计算机软件技术开发中心、勤智数码科技股份有限公司、 平安科技（深圳）有限公司、内蒙古大学、中国铁道科学研究院集团有限公司、浙江蚂蚁小微金融服务集 团股份有限公司、北京百分点信息科技有限公司。 本标准主要起草人：赵江、苏志远、卫凤林、张群、李瑛、梁钢、黄先芝、李国涛、陈敏刚、陈文捷、李正、 韩梅、李华、马小宁、吴艳华、赵正阳、李克鹏、孙伟

本标准规定了大数据计算系统的硬件、软件、网络及安全要求 本标准适用于大数据计算系统的开发设计和运维

本标准适用于大数据计算系统的开发、设计和运维。 规范性引用文件 下列文件对于本文件的应用是必不可少的。凡是注日期的引用文件深圳平安金融中心钢结构巨柱及钢板墙安装，仅注日期的版本适用于本文 件。凡是不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。 GB/T21028信息安全技术服务器安全技术要求 GB/T35295一2017信息技术大数据术语

GB/T38675—2020

计算单元要求如下： a） 应有相应措施保证可用性； b）应支持多处理器； c） 应支持硬件状态监控管理、远程管理： d）应支持系统内部部件扩展； e） 应支持多种虚拟化方式； f) 应支持在停止运行情况下，配置虚拟机的内存数量； g） 应支持在停止运行情况下，配置扩展内存数量 每节点内存应不低于8GB： 1) 应支持扩展DDR3、DDR4或以上内存版本标准； 宜支持内存查错/纠错； k） 宜支持内存镜像/热备； 宜支持PB以上的读写能力； m）宜支持系统外部节点扩展； n） 宜支持在正常运行的情况下横向及纵向在线扩展； 0）宜支持混合内存架构、

计算加速单元要求如下： a）应提供专用计算资源，协助计算单元进行运算处理； 应提供大数据应用加速的专用计算资源，专用计算资源应支持通过高速互联单元与计算单元 连接； 示例：GPU加速单元、FPGA加速单元、ASIC加速单元等。 C） 应具备多线程并发、流水线等模式的计算处理能力； d） 应具备独立内存控制器，提供用于加速计算任务的独立内存空间： e） 应具备高速总线接口与主处理器互连； 运行在计算模块上的主程序应能够配置、使用、管理计算加速单元上的硬件计算资源； g 运行在计算模块上的主程序与计算加速单元之间应具有高效的数据交换协议，包括与主CPU 内存地址之间的映射关系； h）应支持加速单元扩展，接口类型如PCIe等；

宜支持提供批量部署工具，实现固件升级、生效、证

存储单元要求如下： a） 应提供对象、文件、块等多种存储服务方式的一种或多种； b 应支持REST、NFS、Samba、iSCSI、定制API等存储访问协议或接口的一种或多种； 应支持存储半结构化数据、结构化数据、非结构化数据等数据类型的一种或多种； d 应提供用户数据元余存储功能； e) 宜支持分层或分级存储方式； 宜支持压缩、重删、缓存加速、配额、QoS等高级特性； g 应支持存储节点级动态扩展伸缩及存储数据再均衡： h) 应支持在线扩展SATA、SAS、PCIe接口SSD、HDD等，支持热插拔； i) 宜支持扩展连接FC、iSCSI、NAS等协议的存储系统； J 应支持在停止运行情况下，扩展内存的数量； k) 宜支持在线升级； 1) 宜支持PB以上的读写能力； m）可用性应有相应措施保证； n） 应配置企业级硬盘，以保证可靠性； 0 应支持故障硬盘的数据重构

高速互联单元要求如下： a）应提供计算单元、存储单元与计算加速单元之间的互联； 应提供本地计算加速单元中不同加速卡之间的互联； c）应支持TCP/IP等网络协议实现节点之间的互联； 1 宜支持IPoIB、RDMA等协议实现节点之间的高速互联； e 应支持节点之间至少百兆网络的连接； f）应支持在停止运行情况下，扩展的计算单元、存储单元、计算加速单元之间实现互联； g）支持1Gbps以上带宽； h）支持基于网络芯片硬件的数据传输或交换加速功能； 网络端口聚合功能，满足系统对网络带宽的需求，同时可以提高系统可用性

管理监控单元要求如下： a）应提供对硬件部分部件运行状态部分参数的监控功能，如CPU温度、电源电压、风扇转速等； 6）应提供计算单元和计算加速单元使用率的监控功能； c）应提供存储单元总容量与使用率的监控功能； d）应提供网络流量、网络读写速率的监控功能； ）应支持远程登录控制台，监控系统运行状态： f）应具备精确故障警告； g）应具备硬件使用超过阅值的警告功能； h）应支持远程外设挂载与程序安装功能： 应支持系统的日志记录与日志查询； 应支持系统远程日常维护

GB/T38675—2020

供电单元要求如下： a）应具备电源余控制功能，具备在局部故障时提供电源的能力； b）电源模块设计支持热插拔，热更换； c） 应具备故障报警，并将运行状态提供给监控系统； d) 应具备加电时序控制功能； e） 应具备电源负载动态调整技术； 应支持机柜级别集中供电； g）应支持N+N或N+M电源余模式

结构及散热单元要求如下： a）散热方式应支持风冷方式，宜支持液冷及传导散热方式； b） 散热效率应由传感器监控，在管理监控单元中可见； 应采用模块化设计； d） 应采用集中散热技术； e 风扇应支持免工具热插拔； (）应支持前进风、后出风

操作系统要求如下： a) 应支持主流的操作系统类型和主要版本； 应提供操作系统自动化批量部署能力； c) 应提供人机操作界面； d) 应支持计算加速单元及驱动程序《可燃性粉尘环境用电气设备 第4部分：本质安全型 “iD” GB 12476.4-2010》，提供标准化的编程接口； e) 应提供系统和设备运行日志及监控信息； D 应提供大数据系统各种组件所需的运行环境； 宜具备处理器故障隔离支持功能

虚拟化软件要求如下： 应支持对计算、存储、网络等物理设备资源的虚拟化，能够以虚拟机形式为大数据系统部署利 运行提供资源； 宜支持基于策略的虚拟机动态调度； c）宜支持能够根据虚拟机和物理服务器的资源利用率实现虚拟机的动态迁移； 宜支持多个虚拟机批量操作的能力； 宜支持将虚拟存储卷从虚拟机上卸载，并在保证安全的情况下正常删除虚拟存储卷； 宜支持虚拟化高可用，保证在物理服务器岩机后，虚拟机可迁移到其他物理机上；

g）宜支持虚拟机模板，以加快大数据各组件的部署； h）宜支持虚拟机的CPU、内存、磁盘的扩容或缩容； 宜支持虚拟机网卡、磁盘的QoS； 1 宜支持虚拟化资源的超售比配置，以最大化利用物理资源支撑大数据业务的运行； k）宜支持存储虚拟化多副本策略

h）宜支持虚拟机的CPU、内存、磁盘的扩容或缩容； 宜支持虚拟机网卡、磁盘的QoS； 宜支持虚拟化资源的超售比配置，以最大化利用物理资源支撑大数据业务的运行； k）宜支持存储虚拟化多副本策略

资源管理软件要求如下： ）应支持对虚拟机资源的监控管理； 6）应支持对虚拟机资源的安全管理，包括但不限于权限管理、访问控制等： c）应支持根据工作负载进行动态资源调配，为大数据系统的任务类型和调度队列提供资源分配 能力； d）应提供部署和监控代理软件，按照标准接口向大数据系统提供资源运行状况的相关信息以及 执行各种监控任务； e）宜提供支持多种资源模式的自动部署工具，用于自动向基础设施添加新的物理或虚拟资源； 示例：裸机、虚拟机、云服务。 f）宜支持多种资源的统一管理及池化。

资源管理软件要求如下： a）应支持对虚拟机资源的监控管理； b）应支持对虚拟机资源的安全管理，包括但不限于权限管理、访问控制等： c）应支持根据工作负载进行动态资源调配，为大数据系统的任务类型和调度队列提供资源分配 能力； d）应提供部署和监控代理软件，按照标准接口向大数据系统提供资源运行状况的相关信息以及 执行各种监控任务； e）宜提供支持多种资源模式的自动部署工具，用于自动向基础设施添加新的物理或虚拟资源； 示例：裸机、虚拟机、云服务。 f）宜支持多种资源的统一管理及池化。

网络要求如下： a）网络应具备高可用能力DB32∕T 3693-2019 电化学无损定量检测混凝土中钢筋锈蚀 技术规程，包括路径多样性、具备故障转移能力； b）应能够应对网络拥塞，网络设计避免拥塞点以应对高流量的要求： 网络应具备较高的一致性，保障大数据系统并行处理要求； 1 网络应具备可伸缩性，应能够平稳地扩展支持未来的部署规模； 网络应具备隔离性，保证不同大数据业务集群流量互不影响

网络要求如下： a）网络应具备高可用能力，包括路径多样性、具备故障转移能力； b）应能够应对网络拥塞，网络设计避免拥塞点以应对高流量的要求 c）网络应具备较高的一致性，保障大数据系统并行处理要求； d）网络应具备可伸缩性，应能够平稳地扩展支持未来的部署规模； 网络应具备隔离性，保证不同大数据业务集群流量互不影响

全应符合GB/T21028的要求，计算系统宜不低于