DB15/T 1872-2020 大数据平台 接入技术要求.pdf

ICS35.020
L70
DB15
内蒙古自治区地方标准DB15/T1872-2020
大数据平台接入技术要求
Technical specification of big data platform for access
2020-04-03 发布
2020-05-03  实施
内蒙古自治区市场监督管理局  发布

前言
本标准按照GB/T1.1一2009给出的规则起草。本标准由内蒙古自治区大数据发展管理局提出并归口。
本标准起草单位：内蒙古自治区大数据发展管理局、新华三技术有限公司、中国电子技术标准化研究院、内蒙古大学、内蒙古电子信息职业技术学院、内蒙古自治区大数据与云计算标准化委员会、中国人民银行呼和浩特市中心支行、内蒙古自治区国土资源信息院、中信银行股份有限公司呼和浩特市分行、内蒙古自治区标准化院、浪潮软件集团有限公司、北京东方国信科技股份有限公司、中通服咨询设计研究院有限公司、天帆创新（北京）科技发展有限公司、同方知网（北京）技术有限公司、北京东方棱镜科技有限公司、内蒙古跃晨科技有限公司、内蒙古纵横云技术有限公司。
本标准主要起草人：周佳琪、崔连伟、张建军、崔娜、赵逢波、卫凤林、屈强、崔波、胡大伟、汪昆鹏、马逸群、王立权、王一丁、王海珠、徐小强、王楠、李敏、李建文、刘玉坤、胡南磊、付先路、王伟哲、冯国忠。

内容目录：

目次
前言II
1范围1
2规范性引用文件1
3术语和定义1
4缩略语2
5概述2
6接入要求3
6.1关系数据库抽取3
6.2服务网关服务5
6.3实时消息队列6
6.4文件接收FTP服务7
6.5文件拉取FTP服务9
6.6直报系统10
7安全要求12
附录A(资料性附录)关系数据库抽取接入说明13
附录B(资料性附录)服务网关服务接入说明14
附录C(资料性附录)实时消息队列接入说明15
附录D(资料性附录)文件接收FTP服务接入说明16
附录E(资料性附录)文件拉取FTP服务接入说明19

内容摘抄：

大数据平台接入技术要求
1范围
本标准规定了大数据平台与各数据提供单位管理支撑系统进行数据接入的技术要求及数据采集接口、方式。本标准适用于内蒙古自治区大数据平台进行数据采集功能研发、数据采集工具选型及其数据接入场景提供规范要求。
2规范性引用文件
下列文件对于本文件的应用是必不可少的。凡是注日期的引用文件，仅所注日期的版本适用于本文件。凡是不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。
GB/T29262信息技术面向服务的体系结构(S0A)术语
GB/T35274信息安全技术大数据服务安全能力要求
GB/T35295-2017信息技术大数据术语
GB/T37973信息安全技术大数据安全管理指南
3术语和定义
GB/T35295和GB/T29262界定的术语和定义适用于本文件。为了便于使用，以下重复列出GB/T35295中的一些术语和定义。
3.1大数据big data
具有体量巨大、来源多样、生成极快、且多变等特征并难以用传统数据体系结构有效处理的包含大量数据集的数据。
注：国际上，大数据的4个特征普遍不加修饰地直接用volume、variety、velocity和variablility予以表述，并分别赋予了它们在大数据语境下的定义：
a)体量volume:构成大数据的数据集的规模；
b)多样性variety:数据可能来自多个数据仓库、数据领域或多种数据类型；

3.2非结构化数据unstructured data
不具有预定义模型或未以预定义方式组织的数据。GB/T35295-2017,定义2.1.25]
3.3静态数据data at rest
处于静止状态，有典型特征表现为大数据的体量和多样性特征的数据。[GB/T35295-2017,定义2.1.37]
3.4关系数据库relational database
数据按关系模型来组织的数据库。[GB/T35295-2017,定义2.2.5]
3.5管理信息系统management information system
是一个以人为主导，利用计算机硬件、软件、网络通信设备以及其他办公设备，进行信息的收集、传输、加工、储存、更新、拓展和维护的系统。
3.6元数据metadata
关于数据或数据元素的数据（可能包括其数据描述），以及关于数据拥有权、存取路径、访问权和数据易变性的数据。[GB/T35295-2017,定义2.2.7]
4缩略语
下列缩略语适用于本文件。
FTP:标准的文件传输协议(File Transfer Protocol)；JDBC:java数据库连接(Java DataBase Connectivity)

（略）

投稿会员：巧克力布丁