DB2102∕T 0041-2022 大数据标准体系框架(大连市).pdf
《DB2102∕T 0041-2022 大数据标准体系框架(大连市).pdf》由会员分享,可在线阅读,更多相关《DB2102∕T 0041-2022 大数据标准体系框架(大连市).pdf(19页珍藏版)》请在咨信网上搜索。
1、 ICS 35.080 CCS L 77 2102 大连市地方标准 DB2102/T 00412022 大数据标准体系框架 Big data standard system framework 2022 - 01 - 17 发布 2022 - 02 17 实施 大连市市场监督管理局 发 布 DB2102/T 00412022 I 目次 前言 . II 1 范围 . 1 2 规范性引用文件 . 1 3 术语和定义 . 1 4 总体要求 . 1 5 标准体系结构图 . 1 概述 . 1 分体系结构图 . 3 附录 A(资料性) 大数据标准明细 . 9 参考文献 . 15 DB2102/T 0041
2、2022 II 前言 本文件按照GB/T 1.12020标准化工作导则 第1部分:标准化文件的结构和起草规则的规定起草。 本文件由辽宁省软件和信息技术服务标准化技术委员会(LN/TC 09)提出。 本文件由大连市工业和信息化局归口。 本文件起草单位:大连高新区大数据产业协会、大连理工大学计算机科学与技术学院、东北财经大学、大连海洋大学、大连大学、东软集团(大连)有限公司、大连数据湖信息技术有限公司、大连开一信息科技有限公司、大连景泰科技有限公司、大连市人工智能产业协会。 本文件主要起草人:王宇新、祝志杰、于红、于凤岐、刘长虹、钟将、李俊、周东生、张思佳、刘炳军、曲鹤、李佳慧。 本文件发布实施后
3、, 任何单位和个人如有问题和意见建议, 均可以通过来电和来函等方式进行反馈,我们将及时答复并认真处理,根据实际情况依法进行评估及复审。 归口管理部门:大连市工业和信息化局 通讯地址:西岗区胜利路38号 联系电话:83645527-605 标准起草单位:大连高新区大数据产业协会 通讯地址:大连市高新区海创国际产业大厦A座7层 联系人:李佳慧 联系电话:17616660609 DB2102/T 00412022 1 大数据标准体系框架 1 范围 本文件给出大数据标准体系框架, 规定了大数据标准体系总体要求、 标准体系结构图以及分体系结构图等内容。 本文件适用于大数据业务相关的政府、企事业单位、科研
4、院所以及相关组织机构等。 2 规范性引用文件 下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。 其中, 注日期的引用文件,仅该日期对应的版本适用于本文件;不注日期的引用文件,其最新版本(包括所有的修改单)适用于本文件。 GB/T 13016-2018 标准体系表构建原则和要求 GB/T 35295-2017 信息技术大数据 术语 3 术语和定义 GB/T 35295-2017界定的术语和定义适用于本文件。 标准 standard 为在一定的范围内获得最佳秩序, 经协商一致制定并由公认机构批准, 共同使用的和重复使用的一种规范性文件。 标准体系 standard system 一
5、定范围内的标准按其内在联系形成的科学的有机整体。 来源:GB/T130162018,2.4 4 总体要求 标准体系的总体要求如下: a) 标准体系编制原则应符合 GB/T13016 要求; b) 标准体系应系统全面、层次恰当、划分明确、相互协调。 c) 标准体系结构图应由一个总体系结构图和多个分体系结构图构成,体系结构图内方框间用实线连接,表示方框间的层次关系、序列关系。 5 标准体系结构图 概述 DB2102/T 00412022 2 大数据标准体系框架由九个类别的标准组成,分别为:基础、数据、技术、平台/工具、管理、安全和隐私、行业应用、行业人才、大数据企业,总体系结构图见图1。 总则术语
6、参考架构数据资源交换共享大数据集描述大数据生存周期处理与分析技术大数据开放与互操作技术面向领域的大数据技术数据整合数据存储数据计算数据分析数据可视化治理管理评估通用安全基础数据环境安全数据应用安全数据识别与评估工业大数据海洋大数据物流大数据政务大数据交通大数据教育大数据金融大数据农业大数据其他大数据人才能力大数据人才培养大数据企业认定元数据主数据数据模型数据交易数据开放数据共享数据分类分级数据质量数据确权数据估价元数据主数据数据采集数据存储数据预处理数据处理数据同步数据血缘数据可视化数据分析数据访问数据备份数据共享系统互通企业服务总线能力开放服务编排非结大数据标准体系架构基础数据技术平台/工具
7、治理与管理安全和隐私行业应用行业人才大数据企业构化数据处理解析数据融通技术数据服务接口数据对比工具数据质量管理工具数据转换清洗工具数据交换工具变更数据捕获工具关系数据库列数据库图数据库文档数据库键值数据库流计算平台内存计算平台分布式并行计算平台机器学习平台自然语言处理平台计算机视觉平台报表工具自助式分析工具数据治理规划数据治理实施数据模型管理元数据管理主数据管理数据质量管理数据目录管理数据资产管理管理能力评估服务能力评估治理成效评估资产价值评估数据质量评估特殊行业自主可控技术要求特色领域的大数据技术 图1 总体系结构图 DB2102/T 00412022 3 分体系结构图 5.2.1 基础 基
8、础类标准:为整个标准体系提供包括总则、术语、参考架构等通用的基础性标准。为大数据其他部分的标准制定提供基础遵循,支撑各行业、各领域对大数据达成统一理解。基础类标准分体系结构图见图2。 基础基础 总则总则 术语术语 参考架构参考架构 图2 基础类标准分体系结构 基础类标准分为: a) 总则类标准:针对大数据地方标准化指南等进行规定的标准,包括标准化顶层设计和总体要求、标准体系中列出的数据、技术、平台/工具、管理、安全和隐私、行业应用、大数据人才、大数据企业等各类标准之间的关系与要求,适用于大数据领域建设规划、实施和管理; b) 术语类标准:针对大数据及其应用领域术语和定义、密切相关的通用术语和定
9、义等内容进行规定的标准; c) 参考架构类标准:针对大数据技术参考模型、参考框架和应用指南、参考框架用例和需求及基于参考架构的接口框架等内容进行规定的标准。 5.2.2 数据 数据类标准: 为大数据标准体系提供数据层面的准则, 数据标准主要包括数据资源标准和交换共享标准两个部分。数据类标准分体系结构图见图3。 数据数据资源交换共享元数据主数据数据模型数据交易数据开放数据共享 图3 数据类标准分体系结构图 DB2102/T 00412022 4 数据类标准分为: a) 数据资源类标准:数据资源标准主要从元数据、主数据、数据模型三个方面进行规范。 b) 交换共享类标准:主要针对数据交易、数据开放和
10、数据共享功能进行标准化。 5.2.3 技术 技术类标准: 针对大数据通用技术进行规范。 包括大数据集描述、 大数据生存周期处理与分析技术、大数据开放与互操作技术、面向领域的大数据技术四类。技术类标准分体系结构图见图4。 技术大数据集描述大数据生存周期处理与分析技术大数据开放与互操作技术面向领域的大数据技术数据分类分级数据质量数据确权数据估价元数据主数据数据采集数据存储数据预处理数据处理数据同步数据血缘数据可视化数据分析数据访问数据备份数据共享系统互通企业服务总线能力开放服务编排非结构化数据处理解析数据融通技术特殊行业自主可控技术要求特色领域的大数据技术 图4 技术类标准分体系结构图 技术类标准
11、分为: a) 大数据集描述类标准:主要针对多样化、差异化、异构异质的不同类型的数据建立标准的度量方法,以衡量数据质量,包括:数据分类分级、数据质量、数据确权、数据估价、元数据、主数据等相关技术标准。 b) 大数据生存周期处理与分析技术类标准:主要针对大数据产生到其使用终止这一过程的关键技术进行标准制定,包括数据采集、数据存储、数据处理、数据分析、数据可视化、数据访问等标准。 c) 大数据开放与互操作技术类标准:主要针对不同功能层次功能系统之间的互联与互操作机制、不同技术架构系统之间的互操作机制、同质系统之间的互操作机制等相关标准以及通用数据开放共享技术框架等标准,包括:系统互通、企业服务总线、
12、能力开放、服务编排等。 d) 面向特色领域的大数据技术类标准:主要针对工业、海洋、电子政务等领域或行业的共性且专用的大数据技术标准。 5.2.4 平台/工具 平台/工具类标准主要针对大数据相关平台及工具产品进行规范。平台/工具类标准分体系结构图见图5。 DB2102/T 00412022 5 平台/工具数据整合数据存储数据计算数据分析数据可视化数据服务接口数据对比工具数据质量管理工具数据转换清洗工具数据交换工具变更数据捕获工具关系数据库列数据库图数据库文档数据库键值数据库流计算平台内存计算平台分布式并行计算平台机器学习平台自然语言处理平台计算机视觉平台报表工具自助式分析工具 图5 平台/工具类
13、标准分体系结构图 平台/工具类标准分为: a) 数据整合类标准:针对数据服务接口、数据比对工具、数据质量管理工具、数据转换和清洗工具、数据交换工具和变更数据捕获工具的功能和性能进行规范。 b) 数据存储类标准:针对关系数据库、列数据库、图数据库、文档数据库和键值数据库的功能和性能进行规范。 c) 数据计算类标准: 针对流计算平台、 内存计算平台和分布式并行计算平台的功能和性能进行规范。 d) 数据分析类标准: 针对机器学习平台、 自然语言处理平台和计算机视觉等平台的功能和性能进行规范。 e) 数据可视化类标准:针对报表工具和自助式分析工具等数据可视化平台或工具的功能和性能进行规范。 5.2.5
14、 治理与管理 治理与管理类标准:贯穿于数据生存周期的各个阶段,是大数据实现高效采集、分析、应用、服务的重要支撑。该类标准主要包括治理标准、管理标准和评估标准三部分。治理与管理类标准分体系结构图见图6。 DB2102/T 00412022 6 图6 治理与管理类标准分体系结构图 治理与管理类标准分为: a) 治理类标准:主要对数据治理的规划和具体实施方法进行标准研制。 b) 管理类标准:主要面向数据管理模型、元数据管理、主数据管理、数据质量管理、数据目录管理以及数据资产管理等理论方法和管理工具进行规范。 c) 评估类标准: 在治理标准和管理标准的基础之上, 总结形成针对数据管理能力、 数据服务能
15、力、数据治理成效、数据资产价值、数据质量的评估方法。 5.2.6 安全和隐私 安全和隐私类标准主要针对通用安全基础、 数据环境安全、 数据应用安全和数据识别和评估等方面进行规定。安全和隐私类标准分体系结构图见图7。 图7 安全和隐私类标准分体系结构图 治理与管理治理管理评估数据治理规划数据治理实施数据模型管理元数据管理主数据管理数据质量管理数据目录管理数据资产管理管理能力评估服务能力评估治理成效评估资产价值评估数据质量评估安全和隐私数据环境安全数据应用安全通用安全基础数据识别与评估DB2102/T 00412022 7 安全和隐私类标准分为: a) 通用安全基础类标准: 针对数据和隐私安全方法
16、提出的基础类标准, 主要用于指导数据安全普遍性要求标准制定; 包括数据识别、 存储、 传输、 交换、 运算、 销毁等数据生命周期安全管理; b) 数据环境安全类标准:针对数据环境、平台提出的标准,主要用于指导数据存储物理、硬件、平台要求标准制定; c) 数据应用安全类标准: 针对个人和组织数据等提出的数据应用安全类标准; 用于指导个人信息和组织数据保护要求标准制定; d) 数据识别与评估类标准:针对个人和组织数据安全管理评价、评估类标准,用于指导数据安全的评价、评估要求标准制定。 5.2.7 行业应用 行业应用类标准: 主要从大数据为各行业提供的服务角度出发, 根据本地各行业领域特性产生的专用
17、数据标准,包括工业大数据、海洋大数据、政务大数据、交通大数据、物流大数据、金融大数据等领域。行业应用类标准分体系结构图见图8。 行业应用行业应用 工业大数据工业大数据 海洋大数据海洋大数据 政务大数据政务大数据 交通大数据交通大数据 教育大数据教育大数据 物流大数据物流大数据 金融大数据金融大数据 农业大数据农业大数据 其他其他 图8 行业应用类标准分体系结构图 5.2.8 行业人才 行业人才类标准:主要是针对大数据人才的能力、培养等内容进行规定。行业人才类标准分体系结构图见图9。 图9 行业人才类标准分体系结构图 行业人才大数据人才能力大数据人才培养DB2102/T 00412022 8 行
18、业人才类标准分为: a) 大数据人才能力类标准:针对大数据人员职业定义、技能等级要求、人才能力的评价、数据素养等进行标准化规定。 b) 大数据人才培养类标准:针对大数据人才知识体系架构、大数据人才培养、大数据人才认证等进行规定的标准。 5.2.9 大数据企业 大数据企业类标准主要是针对大数据企业认定进行规范。 针对大数据企业的认定原则、 大数据企业能力要求、大数据企业分类等内容进行规定的标准。大数据企业类标准分体系结构图见图10。 大数据企业大数据企业 大数据企业认定大数据企业认定 图10 大数据企业类标准分体系结构图 DB2102/T 00412022 9 A A 附录A (资料性) 大数据
19、标准明细 大数据标准明细参见表A.1。 表A.1 大数据标准明细表 一级分类 二级分类 标准编号 标准名称 状态 基础 总则 大数据标准体系架构 大连市地方标准拟研制 术语 GB/T 35295-2017 信息技术 大数据 术语 发布 参考架构 GB/T 35589-2017 信息技术 大数据 技术参考模型 发布 GB/T 38672-2020 信息技术 大数据 接口基本要求 发布 ISO/IEC TR 20547-1 信息技术 大数据参考架构 第1部分:架构与应用指南 发布 ISO/IEC TR 20547-2 信息技术 大数据参考架构 第2部分:用例和需求 发布 ISO/IEC TR 20
20、547-3 信息技术 大数据参考架构 第3部分:参考架构 发布 ISO/IEC TR 20547-4 信息技术 大数据参考架构 第4部分:安全与隐私 发布 ISO/IEC TR 20547-5 信息技术 大数据参考架构 第5部分:标准路线图 发布 数据 数据资源 GB/T 18142-2017 信息技术 数据元素值表示 格式记法 发布 GB/T 18391.1-2009 信息技术 元数据注册系统(MDR) 第1部分:框架 发布 GB/T 18391.2-2009 信息技术 元数据注册系统(MDR) 第2部分:分类 发布 GB/T 18391.3-2009 信息技术 元数据注册系统(MDR) 第
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- DB2102T 0041-2022 大数据标准体系框架大连市 DB2102 0041 2022 数据 标准 体系 框架 大连市
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【曲****】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【曲****】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。