SZSD07 0002—2024数据要素技术与管理规范.docx

ICS35.240CCS1.70SZSD数字山东工程标准SZSD0700022024数据要素技术与管理规范DataelementstechnologyandmanangementSpecification2024-06-01实施2024-04-15发布潍坊市大数据局发布前言III葩围12规范性引用文件13术语和定义1-1缩略语15相关方法任16数据汇聚261概述26.2数据来源263数据汇聚方式26.4汇聚要求27数据治理37.1 概述37.2 治理要求38数据存储31数据库分类382存储要求19数据共享交换410数据分析与服务110. 1质410.2服务内容4U数据资产411. 1概述4112元数据管理1113数据资产类目5114数据资产地图”.5数据资产应用12数据安全13数据助J13.1质肽目标13.2顷吊要求5参考文献7本文件按照GB/T1.I2020标准化工作导则第1部分：标准化文件的结构和起草规则3的规定起草.请注意本文件的某些内容可能涉及专利.本文件的发布机构不承担识别专利的费任.本文件由海坊市人数据局提出并归口。本文件起草单位：潍坊市大数据局、潍坊市大数据中心.本文件主要起草人：丁悒艳、王丽鼾、华宁芳、柴力、沸洪华.徐兵、王春燕、季志臣、韩鹏东.数据要素技术与管理规范1范固本文件规定了数据要索的发聚、治理、存谛、共享交换、分析与服务要求，以及数据资产管理、散据安全和数据颇显娈求,本文件适用于大数据工作主管部门、数据提供方和数据需求方的数据汇聚、治理、存储、共享交换、分析与服务等活动.2规葩性引用文件下列文件中的内容通过文中的现范性引用而构成本文件必不可少的条款，其中，注口期的引用文件，仅该日期对应的版本适用于本文件：不注H期的引用文件.其最新版本(包括所有的蟋改单)适用于本文件.GB/T22239-2019信息安全技术网络安全等级保护明木要求GB/T35273-2020信息安全技术个人信息安全规范：GB/T39477-2020信息安全技术政务信息共享数据安全技术要求GB/T-1M79-2022信息安全技术网络数据处理安全要求ISO/1EC13249信息技术数据库谱力SQ1.多媒体和应用包3术语和定义下列术语和定义适用于本文件.3.I数据提供方dataprovider在数据汇聚、共享和开放过程中，提供数据(或接口服务)的公共管理和果务机构.3.2数据需求方datauser在数据汇聚、共望和开放过程中，中讲使用数据(读接口服务)的公共管理和服务机构。3.3资源目录resourcedirectory依据规范的元数据描述，按照一定分类方法进行排序和编码的一n信息，用于描述信.&资源特征，以便对信息资源的检索、定位与获取。4缩略语下列缩略语适用于本文件.AI：人工智能(ArtificialIntelligence)APIs应用程序接口(pplicationProgrsunInterface)Bl；商业智能(BusinessIntelligence)HTTP：超文本传输协议(HyperTextTransferProtocal)JSON：基TJaVaSCript语法子集的开放标准数据交换格式(JaYaSCriIHObjectNotation)REST:表述性状态传递(RepresentationalStateTransfer)SOAP：简单对象访问协议(SiBPIeObjectAccessProtocol)SQ1.：结构化查询语寺(StructuredQuery1.anguage)WSD1.：阳络服务描述语言(WebServiceDescription1.anguage)XM1.：可扩展标记语言(ExtensibleMarkup1.anguage>5相关方贡任数据要素管理涉及大数据工作主管部门、数据提供方和数据需求方，其相关职员包括：大数据工作主管部门负货审核数据焉求,完成数据需求方和数据提供方的对接：数据提供方按照审核要求提供数据资源：一一数据需求方按照审核要求使用数据资源，并确保数据安全。6数据汇聚6. 1概述数据汇聚是利用技术手段将分散于不同部门或不同系统的数据，实现统一获取和使用的过程，公共管理和限务机构应根据资源目录将木部门所有可汇聚的数据汇聚至潍坊市体化大数据平台，并负出数据的更新：对于不予汇聚的数据，应向大数据工作主管部门提供书面说明，并征得大数据工作主管部门的同懑。&2皴据来源汇聚数据的来源包括但不明于：a）政务数据：公共管理和服务机构履职和服务过程中采蛆、产生和管理的各类数据；b）物联惮数据：城市管理中各种物联网感知设备设施获取的数据，如环境礴知.智能家居、楼宇感知信息、汽车与交通运输设茶感知信息等：c）视物数据：视软监控设备获取的视频及其相关数据,包括实时机音频、历史视音般、视痂片段、图像等：<1）互联网数据：公共管理和服务机构利用技术手段，从网络、做信平台或其他行业人数据平台采集获得的互联网数据，包括互联网发布的发展趋势、白皮书，政府网站对外公开的信息报告、年度报告等.63数据汇聚方式根据业务系统成熟度、技术能力以及接入成本等因崇，选择合理的数据汇聚方式,数据汇聚方式包括但不限于：a）库表接入；b）API接口接入：c）文件接入.2 .4数据汇聚要求641基本要求按照“一数一源、一海多用"的原则,实现数据资源一次来集、共享使用。除法律、法规另有规定外,应通过共享方式获取的政务数据，不得出发来集、多头采集.非涉率数据应汇聚至一体化大数据平台，并做好数据维护和更新。公共管理和服务机构应根据资源目录将本部门所有可汇聚的数据汇聚至潍坊市一体化大数据平台，并负责数据的史新：对于不予汇聚的数据.应向大数据工作主管部门提供书面说明.并征得大数据工作主管部门的同意。6 4.2库表接入数据提供方提供的库表接入方式应满足以下要求：a）数据库的库名、表名、列名等应符合ISO/IEC13249要求：b）参与交换的数据库表之间不能有外健.表与表之间在物理上是独立关系，且每张表应有主键：C）应优先配置国产数据森：<0保存采集的FI忐记录，643API接口接入数据APl接【】接入方式宜满足以下要求:a）支持REST和WebService等接I类型：b）采用IIPS1.0/1.1服务传输怫议：c）WcbSCrViCe眼务消息封装办议采用SOAPl.1/1.2.REST服务消息封装协议采用HTTP1.0/1.1；d）采用XM1.JSON,JAVA对象等数据返回格式；e）服务描述应包含服务调用者使用的具体访问接口内容，包括数据类型定义、操作、交互消息格式和内容、端口类型及绑定等，内容描述符合WSD1.I.1的规定。6.4.4文件接入文件接入方式应满足以下要求：a）支持文件的读取、接收、校脸、传输以及断点续传；b）具备传输全过程监控能力,并保证传输的安全性、准确性和一致性：c）对于异常文件的采集提供手工或自动采集手段.7数据治理7.1概述对多海数据进行数据质累稽15、问逊数据修复、数据标准化转换等处理，并基于目标数兆模型进行数据关联和数据风配融合，形成规范、一致的数据。72治理要求数据治理要求如下：a）大数据工作管理部门负责组织开展本地区的数据治理工作：b）公共管理和限务机构应按照本级大数据工作管理部门的要求开展本部门数据治理，保证数据的准确性、完整性：c）数据相关方（包括数据需求方应在发现数据问题的2个工作日内，将问即反馈至数据提供方，数据提供方应在5个工作FI内完成何SS处理,8数据存储ai数据库分类数据库包括但不取于基础数据摩、主即数据库、专飕数据库.各类数据座宜包含以下数据.a）基础数据库,是指招分敢在各公共管理和服务机构的基础信息数据汇聚成库,为全社会提供全面、精准权或的基础数据支撑，应包括但不限于人口、法人单位、空间地理、电子证照、公共信用等子数据库.各子数据库应包括以下数据资源：D人11座应包括基础伯息、出生信息、死亡信息、婚姻信息、社保信息、世康信息、公枳金信息、房产以及证书等各类数据资源：2）法人单位想应包括企业聪本信息、行政执法信息、企业生产经甘信息、以及税务、司法、信用等各类数据资源：3）空间地理库应包括矢量数据、影像数据、高程模K!数据'三维模型数据、地幺地址数据等础地理信息数据；4）电子证照悔应包括出生医学证明、营业执照、隹筑施工许可证'生许可证、结始证等通用类证照资源：5）公用伯用库应包括自然人、法人和其他组织的基本信息、守信伯息、失信信息等.b）主题数据库，是指困绕某一主题应用场景,将关联的各公共管理和服务机构数据汇聚形成的数据库，支撑跨部门、特领域数据应用,包括但不限于医疗健,康'交通出行、生态环境等数一库.c）专胭数据库，是指各公共管理和服务机构整合本行业各层级数据资源形成的数据陈，由各行业特定时期的专项业务资源构成，加道路数据库包括道路名、长度、变度、密度、运载能力、类型、结构、途经居民点、交通状况（车流量、车速限制、道路位置等.82存储要求数楙存储的基本要求如下：a）应支持数据上传、数据下载、资源目录性看、资源目录创建、资源目录删除、权限修改等操作：b）应支持标准、开放的数据访问API对数据进行操作；C）应提供数据自动备份或手动备份功能；d）应支杼数据更新、删除等数据管理功能.9数据共享交换数据共享交换应满足以下要求：a）根据实际业务需求,提供服务按口、库表交换、文件交换等多种方式，依托一体化大数据平台开展数据共享交换：b）明确共享交换的数据资源与资源目录之间的映射关系，确保共享交换的数据资源都己编I1.10数据分析与服务W.1概述数据分析与服务应具备指标管理、Bl分析等能力，并根据业务需求设计业务模型、数据模型、算法模型，支投数据统计、预警预测、关系图谱、专即分析等数据分析服务.10.2服务内容应提供以下数据分析与服务内心*a）地理信息服务：基于空间地理基础数据库,对外提供标准统一的地理信息服芬如空间定位、地名地址匹配、地图极务等.空间地理基础库的更新及维护需要广泛整合来源于不同部门的地理信息实时数据.如建筑模型、街景影像、地下管线等,偌扩大地理信息数据采集更新条遒，以保持地理信息库的持续完善与实时更新，b）人工智能决策分析：通过对部门1.l建的信息化系统、计划新建的信息化系统进行分析解构，并分析各部门智数化应用时于人工智能技术支掾的需求，经雷求汇总分析得出站论：人工智能决策分析包括但不限丁人脸识别、车辆识别等视频分析以法模型，以及结构斛折、评价描述、分析预测、智能推荐等综合性算法，C）人工智能服务：基于各类Al"法.实现智恕交通违法抓拍、稽查布控以及平安城市、粽治维松等人工智能果务。d）数据服务：应提供完善的数施服务，包含数兆采集、湎洗、管理、共享交换、分析展示等数据全生命周期底营的数据治理及创新应用体系.11数据资产管理11.I班述数据资产管理应对数据资产全生命冏期进行规划设计、过程控制和舫家监督，具备数刖标签管理、元数据管理、数据资产类目、数据资产地图、数据资产应用等方面的管理能力.112元数据管理元数据管理包括但不限于以下功能：U）实现多种方式的元数据采集：b）提供元数据分析功能,包括数楙全生命周期分析等实现对数据资产的维护和使用：c