GB/T 38676-2020 信息技术 大数据 存储与处理系统功能测试要求

ICS35.240

L67

中华人民共和国国家标准

/—

GBT386762020

信息技术大数据

存储与处理系统功能测试要求

——

InformationtechnoloBidata

gyg

Functionaltestinreuirementsforstoraeandrocessinsstems

gqgpgy

2020-04-28发布

国家市场监督管理总局

发布

国家标准化管理委员会

/—

GBT386762020

目次

前言…………………………Ⅰ

1范围………………………1

2规范性引用文件…………………………1

3术语和定义………………1

4缩略语……………………1

5概述………………………1

6大数据存储子系统的功能测试要求……………………1

6.1基本功能的测试要求………………1

6.2分布式文件存储的功能测试要求…………………2

6.3分布式结构化数据存储的功能测试要求…………2

6.4分布式列式数据存储的功能测试要求……………3

6.5分布式图数据存储的功能测试要求………………3

7大数据处理子系统的功能测试要求……………………3

7.1基本功能的测试要求………………3

7.2批处理框架的功能测试要求………………………4

7.3流处理框架的功能测试要求………………………4

7.4图计算框架的功能测试要求………………………5

7.5内存计算框架的功能测试要求……………………5

7.6批流融合计算框架的功能测试要求………………5

/—

GBT386762020

前言

本标准按照/—给出的规则起草。

GBT1.12009

请注意本文件的某些内容可能涉及专利本文件的发布机构不承担识别这些专利的责任

Ⅰ

/—

GBT386762020

信息技术大数据

存储与处理系统功能测试要求

1范围

、、、

本标准规定了大数据存储与处理系统的基本功能分布式文件存储分布式结构化数据存储分布

、、、、、

式列式数据存储分布式图数据存储批处理框架流处理框架图计算框架内存计算框架和批流融合

计算框架的测试要求。

本标准适用于大数据存储与处理系统的测试。

2规范性引用文件

。,

下列文件对于本文件的应用是必不可少的凡是注日期的引用文件仅注日期的版本适用于本文

。,()。

件凡是不注日期的引用文件其最新版本包括所有的修改单适用于本文件

/—信息技术大数据存储与处理系统功能要求

GBT377222019

3术语和定义

/—界定的术语和定义适用于本文件。

GBT377222019

4缩略语

下列缩略语适用于本文件。

:()

API应用程序接口AlicationProramminInterface

ppgg

:()

CPU中央处理器CentralProcessinUnit

g

:()

DAG有向无环图DirectedAcclicGrah

yp

:()

GPU图形处理器GrahicsProcessinUnit

pg

:()

MPI消息传递接口MessaePassinInterface

gg

:()

SQL结构化查询语言StructuredQuerLanuae

ygg

5概述

/—,

本标准根据GBT377222019规定的大数据存储与处理系统的功能要求给出了相应的测试

要求。

6大数据存储子系统的功能测试要求

6.1基本功能的测试要求

大数据存储子系统基本功能的测试要求如下:

1

/—

GBT386762020

)、;

a应测试大数据存储子系统是否能对文件图等数据进行上传和下载的操作

)、、、;

b应测试大数据存储子系统是否能对目录进行创建查看权限修改删除等操作

)、、、、、

c应测试大数据存储子系统能否通过API调用对文件对象图等数据进行查询修改删除增

加等操作;

)应测试大数据存储子系统能否通过开源或商业工具提供系统与传统关系型数据库之间交换数

d

据和文件;

)()

e应测试大数据存储子系统能否通过开源或商业工具提供系统与其他文件系统如ext2等之

间交换数据和文件;

),;

f应构造一个关键节点故障验证大数据存储子系统中的数据读写是否正常

)//。

应测试大数据存储子系统能否通过界面工具命令行方式完成自动或手动备份自动备份需

g

,、;

配置相应的参数如备份周期备份数等

)、、、

h应对大数据存储子系统中存在的结构化数据半结构化数据非结构化数据执行批量更新批

,;

量删除等操作测试操作是否正常执行

),;

i应测试大数据存储子系统能否从消息队列读取数据并将计算结果实时写入数据库

),。

应测试大数据存储子系统能否将数据采集到实时检索平台并根据索引主键进行实时查询

j

:/—。