2023服务生成网络白皮书.pdf
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 2023 服务 生成 网络 白皮书
- 资源描述:
-
I 前 言 随着人工智能技术的不断发展和普及,服务生成网络(Service Generation Network,SGN)正成为推动数字化时代的重要力量。SGN是一种创新性的人工智能网络系统,将自然语言处理、深度学习、多模态整合等领域融合,以实现智能化网络服务的自动生成和定制化。本白皮书旨在探讨服务生成网络的核心概念、关键技术和应用场景。我们将介绍 SGN 的架构,包括其在意图驱动、数字孪生、可编程整合和处理方面的优势。随后,我们将探讨 SGN 的核心技术,包括意图驱动网络、自动化网络配置、网络全可编程等。这些技术相互协作,使得 SGN 能够准确理解用户需求并生成相应的智能化网络服务。本白皮书还将探讨 SGN 的应用场景,包括网络规划、网络优化、语义编解码、异构设备接入、网络切片服务定制、网络故障自愈、攻击流量检测等,为用户提供高度个性化和智能化的解决方案。通过深入研究这些应用场景,我们将揭示 SGN 的应用潜力以及其对未来网络发展的影响。在探讨 SGN 的技术和应用的同时,我们也知晓其面临的挑战和限制。模型训练挑战、部署泛化迁移挑战、隐私保护、数据安全等方面都是需要行业认真思考和解决的问题。通过合理的规范和措施,我们需要确保 SGN 的发展是稳健且可持续的。II 目 录 前 言.I 目 录.II 一、引言.1 二、服务生成网络的愿景.3 三、服务生成网络架构.5 3.1 生成式 AI 赋能意图驱动层.5 3.2 数字孪生网络映射层.8 3.3 深度全可编程网络层.9 四、服务生成网络关键技术.11 4.1 生成式人工智能.11 4.2 意图驱动网络技术.21 4.3 网络自动化配置.24 4.4 数字孪生网络技术.27 4.5 全可编程网络基础设施.34 4.6 深度强化学习网络优化.40 五、服务生成网络场景与用例.49 5.1 网络智能规划和优化场景用例.49 5.2 网络智能部署场景用例.58 5.3 网络智能管理控制用例.64 III 六、服务生成网络的挑战与趋势.70 6.1 通用大模型训练的挑战.70 6.2 部署与泛化迁移的挑战.72 6.3 数据隐私与安全的挑战.73 七、总结.76 附录 A:术语与缩略语.77 参考文献.78 1 一、一、引言引言 服务生成网络(Service Generation Network,SGN)是一种先进的基于人工智能的网络系统,它整合了多种技术,包括自然语言处理(NLP)、意图驱动网络、自动化网络配置、数字孪生网络、可编程网络和网络优化等能力。SGN 旨在根据用户的请求或需求智能化的生成各种网络服务。SGN 利用意图驱动网络技术,理解用户通过自然语言或其他形式的输入所表达的意图和需求。通过解释和分析用户意图,SGN 能够准确生成相应的网络服务和响应。SGN 融合了自动化网络配置功能,使其能够根据生成的服务和用户的具体要求动态调整网络设置和参数。这使得网络能够适应并高效优化其配置,以满足不断变化的服务需求。SGN 支持数字孪生网络,即物理网络或网络组件的虚拟副本。这些数字孪生提供网络状态的实时和准确表示,便于对网络行为进行监控、分析和预测。SGN 可以基于这些信息生成针对实际网络状况的定制服务。SGN 与可编程网络兼容,网络行为可以通过大语言(决策)模型操作软件接口和编程语言进行控制和定制。这种可编程性使得 SGN能够适应不断变化的需求,部署新的服务并高效优化网络资源。SGN具备先进的网络优化能力,分析生成的服务的性能和效率。2 它可以考虑诸多因素,如网络流量、延迟、带宽和用户需求,以优化服务交付和网络性能。服务生成网络是一种智能网络系统,通过大语言模型和一系列先进技术实现。它能够理解用户意图、自动配置网络、利用数字孪生网络进行实时监控、操作可编程网络以及优化服务交付,从而为各种网络环境提供智能化的服务解决方案。3 二二、服务生成网络的愿景服务生成网络的愿景 服务生成网络的愿景包括训练网络大语言模型、网络设计大模型、和网络决策大模型。(1)在网络中用大语言模型自动化生成网络领域所需的生成文字、图片、代码、语音、视频,比如语音客服、网络报告、设备文档、操作指令、配置命令行、网络仿真所需的数据格式、流量模型、画实验图,以及辅助进行网络领域的教学和培训,生成教学文档 PPT 等。(2)在网络中采用设计大模型,设计网络协议、路由算法、调度机制、拥塞控制机制、容量规划方案、设备购买方案、成本优化方案、算力调度方案、资源分配方案,基站接入频谱和功率、网络覆盖范围和设备数量、视频流自适应编码,支持成本优化、QoS 保障、可靠性/稳定性/灵活性/性能优化,借助深度强化学习通讯模型,实现网络智能体的协同与泛在优化。(3)在网络中用决策大模型,压缩信息特征并将知识符号化,从而完全或者部分替代人进行推理、决策、行动,使能通过自然语言与智能机器交互的方式来高效地完成决策任务。例如,大模型问答系统基于历史数据提供操作和配置建议,进一步实现网络自动化或者自动配置,实现自然语言到网络配置语言的智能转换,自动生成配置参数和配置文件,自动接入异构网络设备,自动故障发现,自动运维,自动生成服务定制网络切片,自动决策网络缩扩容,实时决策路由和 4 资源调度。5 三三、服务生成网络架构服务生成网络架构 服务生成网络涵盖 GAI(Generative artificial intelligence,生成式人工智能)赋能意图驱动层、数字孪生网络映射层、深度全可编程网络层,其架构如图 3-1 所示。3.1 生成式生成式 AI 赋能意图驱动层赋能意图驱动层 如图3-1所示,GAI赋能的意图驱动层基于知识图谱、强化学习、深度学习等基础模型库进行 GAI 大模型训练,以获得大(型)语言模型(LLM,large language model)和大(型)决策模型(LDM,large decision-making model)。意图驱动层详细展示了基于 LLM 模型与 LDM 模型,从用户意图输入到智能决策生成、智能网络解决方案自优化的整体流程。首先,在用户输入自然语言意图文本后(包含用户对网络设计、规划、配置、运维的需求),基于 LLM 模型进行 GAI 意图转译,挖掘用户的网络可靠性需求、成本开销等意图实体内容;随后,通过用户意图输入进行 LDM 模型训练,根据网络状态与意图反馈进行标签任务的预训练、重训练以及微调,生成智能决策模型;最后,通过映射层闭环反馈进行 GAI 优化以实现决策模型的意图保障与验证,如支持网络协议、网络切片的自动设计与遥测分析等智能管控。其中,GAI 模型主要包括语言模型 GPT-4、PaLM(Pathways Language Model)和 LLaMA 6(Large Language Model Meta AI)模型等。GAI 赋能的意图驱动生成的智能方案包含三个阶段:(1)自动设计:首先,根据网络场景与用户意图设计并生成新的网络协议。例如高并发场景下的自适应传输控制协议,大规模异构网络场景下的自主生成网络优化方案,解决网络可扩展性问题。(2)优化部署:基于意图需求自动生成网络部署方案,例如在骨干网络规划时,根据当前流量矩阵和可靠性需求,给出 IP+光层拓扑,以及所需的设备数、光纤数,并最小化设施成本开销。(3)智能管控:GAI 感知物理网络环境,学习历史配置操作数据,构建智能运维模型,从而在故障或告警时自动给出智能配置操作建议,比如在网络拥塞时自动增加某链路带宽或迁移重载应用的路径。综上,SGN 架构集合了意图驱动 GAI 智能化决策生成能力,数字孪生网络虚实映射与配置验证特性以及可编程网络数据平面深度可编程、灵活功能卸载等优点。意图驱动层能够基于 LLM 模型进行预训练、适应性调整、利用和容量评估,通过对物理网络进行高效的分析、诊断、仿真和控制及策略在线迭代,可基于 LDM 模型实现网络的智能化决策。生成的智能决策方案可以在映射层内进行调整、优化和验证,以此实现数字孪生网络对实际物理网络的实时控制、反馈与优化,最终实现网络自学习、自验证、自演进的闭环。7 深度全可编程网络层可编程网络交换设备CPU+SmartNIC/DPU可编程网络端侧设备高性能可编程数据分组处理芯片FPGAASICMP.转发逻辑可编程协议解析可编程资源可编程NP软件定义与硬件加速网络管理存储安全卸载CPU工作负载协议无关性可重构配置平台无关性高效数据测量控制指令下发数据平面高性能编程语言 低延时/高速率转发性能 低成本定制化可编程能力 多类基础设施操作卸载零信任信息安全保护 数字孪生网络映射层虚拟数字孪生网络网络规划流量建模调度优化质量保障孪生南向接口迭代调优仿真验证服务映射模型数字孪生体管理模型管理拓扑管理安全管理意图管理 网络控制与编排跨域协同时延保障设备管理用户管理业务适配资源调度共享数据仓库基础模型功能模型用户业务运行状态数据采集数据管理数据服务数据模型孪生北向接口意图反馈智能方案下发物理网络智能决策生成大型决策模型LDM智能网络解决方案 自动设计 网络协议 网络切片 按需定制 智能管控 遥测分析 智能调度 意图驱动GAI优化意图验证意图保障闭环反馈意图驱动 GAI赋能意图驱动层 流量矩阵M 可靠性X 成本开销YGPT-4PaLMLLaMA.知识图谱强化学习深度学习生成式AI预训练重训练微调任务标签112323ABC基础模型库 拓扑模型 网元模型大型语言模型LLM意图输入大型语言模型LLM意图文本意图实体GAI意图转译GAI大模型训练大型决策模型LDM智能意图输入智能方案优化X F(X)F (X)XZ 图 3-1 服务生成网络分层架构。8 3.2 数字孪生网络映射层数字孪生网络映射层 通过深度全可编程网络技术,数字孪生网络映射层可对网络数据平面和控制平面进行实时更新,对物理网络进行高效的操作和配置,并基于数字孪生体,实现对物理网络的低成本试错验证5。如图 3-1所示,数字孪生网络映射层基于 DTN(digital twin network)架构6集中了服务映射模型、虚拟数字孪生网络、网络孪生体管理模块以及共享数据仓库四个子系统。其中,虚拟数字孪生网络是基于网络层的可编程网元基本配置、环境信息、运行状态、链路拓扑等信息,建立的对应于物理实体网络的孪生网络体。服务映射模型根据意图驱动层的智能方案建立数据建模实例,以最大化网络业务的敏捷性和可编程性。数字孪生体管理负责网络孪生体的网络编排与控制以及全生命周期管理。共享数据仓库负责存储各种测量到的网络数据,并向服务映射模型和数字孪生网络提供数据服务。此外,映射层还通过孪生北向接口与南向接口连接网络层与意图驱动层。数字孪生网络映射层整体运行流程如图 3-1 所示。首先,服务映射模型通过孪生北向接口收到智能网络方案后,充分利用数据仓库中的网络数据,调用网络规划、调度、诊断、预测等各种功能模型构建网络模型实例。在虚拟数字孪生网络中,网络模型实例通过程序驱动在虚拟拓扑与网元中对调度优化等目标进行充分仿真验证,保障下发物理网络网元控制指令与配置信息的有效性和可靠性。整个仿真验证与迭代优化过程形成闭环,并可以通过服务映射模型生成意图反馈与 9 意图驱动层互动。共享数据仓库通过孪生南向接口测量并存储网络实体的各种配置和运行数据,形成数字孪生网络的单一事实源,为各种服务于应用的网络模型提供准确完备的数据。网络孪生体管理子系统完成数字孪生网络的模型、拓扑、安全和意图管理,支持孪生的网络控制与编排,包括跨域协同、时延保障等功能。在层间接口方面,孪生南向接口通过远程直接数据访问(RDMA,remote direct memory access)协议以实现频繁、高速的测量数据传输,节省对 CPU 算力的消耗同时降低业务的传输时延,提高数据测量上传和控制信息下发的效率。孪生北向接口通常采用轻量级、易扩展的RESTful API 来实现服务映射模型与意图驱动层连接,支持映射模型接收智能网络方案输入与抽象化意图反馈78。3.3 深度深度全全可编程网络层可编程网络层 如图 3-1 所示,服务生成网络架构的深度全可编程网络层包含了可编程网络交换设备以及可编程网络端侧设备,这些数据平面可编程网元共同组成了底层物理网络,并将数据分组处理逻辑与网络控制逻辑开放给用户,以进行系统快速和可理解的重新配置的能力。其中,可编程网络交换设备利用可编程数据交换芯片提供报文解析、处理逻辑自定义的能力,突破转发设备功能固定的限制,配合数据平面可编程语言可以快速地开发和部署新的网络功能,例如用户自定义转发逻辑、灵活解析协议以及业务动态部署等功能。可编程网络端侧设备主要通过“软件定义,硬件加速”的软硬件协作方式,将网络、存储和 10 安全等功能从服务器 CPU 中卸载,从而为应用提供更多的处理能力3,包括智能网卡(SmartNIC,smart network interface card)和数据处理单元(DPU,data processing unit,也称数据处理器)。其主要通过编程转移 CPU 的大量功能,比如 OpenvSwitch、VxLAN 等,从而节省了 CPU 资源,以支持快速联网、高效数据处理、加速数据传输。因此,网络层具备低延时/高速率转发性能、低成本定制化可编程能力,可实现多类基础设施操作卸载与零信任信息安全保护。在深度全可编程网络层中,数据平面可编程语言可支持用户自定义网络数据分组处理,包括 P4、packetC、PX、NPL(natural language processing)等语言4。其核心设计目标包括可重配置性,协议无关性和平台无关性。具体功能体现在交换机的分组处理方式可修改且不受协议限制,对于处理描述不受底层平台限制。可编程数据交换芯片的转发逻辑取决于编译到芯片的可编程语言程序,不再固定于硬件。目前,根据使用的芯片技术可大致分为以下几类:专用集成电路(ASIC,application specific integrated circuit)、现场可编程门阵列(FPGA,field programmable gate array)、网络处理器(NP,network processor)等。11 四四、服务生成网络关键技术服务生成网络关键技术 4.1 生成式人工智能生成式人工智能 近年来,随着如 ChatGPT 等多个热门 AI 生成应用的推出,人工智能受到巨大关注,同时也让人们看到了人工智能技术所具有的极大价值与前景。人工智能目前已应用于如金融、娱乐、新能源、医疗、教育、数字营销、创意产业等多个领域,人工智能已经成为全球科技领域的焦点之一。生成式人工智能(GAI,Generative artificial intelligence,也称Generative AI、生成式 AI)是人工智能的子领域,一般依赖于深度学习技术和人工神经网络,利用现有文本、图像、音频等内容来学习生成全新内容、解决方案或新概念。这些网络由多个层级的互联节点(神经元)组成,可以通过学习输入数据的统计规律,来创造新的数据,形成创造性的表达,极大的拓展了人工智能在各个领域的应用前景。人工智能经过早期的技术积累和迭代,已经逐渐形成了符号主义、连接主义和行为主义 3 个领域划分。从 2012 年至今,生成式人工智能发展迅速,迎来了爆发期,主要原因在于深度神经网络(DNN)模型和算法的改进,实现了惊人的图像识别、语音识别等应用场景的性能提升。当下,在更广泛且多样化的数据集、更好的算法和更强大的计算 12 机硬件的支撑下,生成式人工智能的进展迅速且持续。生成式人工智能适合许多应用,例如图像和视频合成、语音合成和语言生成等。目前生成式人工智能是一个活跃的研究领域,正不断迭代出新的模型和应用场景。据波士顿咨询预测,至 2025 年生成式人工智能的市场规模将至少达到 600 亿美元,而其中大约 30%的人工智能应用将来自广义的生成式人工智能技术。随着生成式人工智能模型的不断改进,自主内容创作和生产的门槛大大降低,市场正在对这一领域的高需求进行反应。(1)生成式人工智能技术原理 生成式人工智能基本原理是通过训练模型来学习并预测数据的概率分布,从而生成新的数据。具体来说,生成式人工智能的工作原理分为三个步骤:数据预处理、模型训练和数据生成。1)数据预处理:将原始数据转换为模型可处理的格式,如将文本转换为数字序列。2)模型训练:使用训练数据来训练生成式人工智能模型,通常采用深度学习算法,如循环神经网络(RNN)或变分自编码器(VAE)等。3)数据生成:在训练完成后,生成式人工智能模型可以通过输入一些种子数据(提示)来生成新的数据,如生成新的文本、图像或音频等。(2)生成式人工智能技术应用 生成式人工智能是一种颠覆性的机器学习算法,能从数据中学习 13 内容,并利用这些内容创造出全新的内容。生成式人工智能可以从少量的信息中创造出新的东西,并可用于各种领域和各种应用。从传统编程到神经网络再到生成模型,最大的进步是在生成模型中,用户可以生成自己的内容,无论是文本、图像、音频、视频等等。文本:生成式人工智能可以生成内容,创建文章、故事、诗歌和程序代码,并可用于为客户服务生成客户查询的自动响应。OpenAI 公司的 ChatGPT 即是该应用的一个示例。图像和设计:生成式人工智能创造独特的,多样化的艺术品,如数字绘画,三维设计和动画。音乐:生成式人工智能模型可以使用输入数据和用户偏好生成音乐曲目,能够分析现有的音乐数据,理解模式和结构,并生成符合用户偏好和特定标准(如流派、风格或情绪)的音乐。语音:生成式人工智能可以接收内容并创建适当的语音音频。用户输入文本后,生成式人工智能会实时将其转换为语音。生成的语音可用于各种用途,包括语音应答系统和虚拟助手。与传统的文本到语音系统不同,它能生成听起来更自然、更富有表现力的语音。目前,随着生成式人工智能的发展进入快车道,更加丰富的功能以及出色的反馈输出,使生成式人工智能在社会生产生活的各个方面发挥重要作用。但由于相关产业技术以及法律法规的不完善也导致浮现出一些如安全性、公平性等一系列争议,因此需要相关方面的正向引导,稳步推进监管治理,加速创新应用,共建产业繁荣发展。14 4.1.1 AI 大模型工作原理大模型工作原理 图 4-1 SGN AI 大模型工作原理示意图。AI 大模型工作步骤主要有四步,如图 4-1,分别是数据测量、数据预处理、模型预训练与微调、内容推理与生成15。第一步是数据测量,可以分为两个主要部分。首先,在设备端侧,数据测量可以采用物联网数据测量和被动数据测量的方式,结合接入网,实现对数据的测量和传输。其次,在网络边缘,数据测量采用众包数据测量和数据平台共享的方式,同时结合接入网和骨干网,实现数据的获取和共享16。在设备端侧,物联网数据测量是通过将各种传感器和设备连接到互联网,实时测量和传输数据。物联网设备可以获取环境参数、设备 15 状态等信息,并通过接入网将数据传输到后端服务器或云平台进行存储和处理。这种方式能够实现设备的远程监控、数据分析和智能化决策,为各种应用提供数据支持。被动数据测量是(在用户授权情况下)通过监测用户在日常生活中产生的数据来测量信息。这些数据可以来自手机应用程序、社交媒体活动、浏览器历史记录等。通过用户明确的授权和同意,这些数据信息可以被测量并用于个性化服务、用户行为分析和市场研究等领域。在设备端测量的数据通过接入网进行传输。接入网是连接设备和用户到互联网的通信网络。它可以采用有线或无线网络技术,提供设备的物理连接和接入点。但是,接入网的设计和运维需要考虑网络的稳定性、安全性和传输速度,以确保数据的可靠测量和传输。在网络边缘,数据测量采用众包数据测量和数据平台共享的方式。众包数据测量是通过广泛的参与者来测量数据。参与者在知情的情况下可以通过手机应用程序或网页接口上传数据,为特定项目或应用提供数据资源。数据共享平台则提供数据存储、管理和共享的功能,使不同参与者可以访问和共享数据。这些数据测量和共享的活动结合了接入网和骨干网的功能。接入网提供设备和用户终端的连接,确保数据能够顺利传输到数据平台。骨干网作为核心网络架构,连接不同区域的接入网和数据中心,支持大规模数据的传输和共享。第二步是数据预处理,可以分为数据云存储和数据预处理。在数据云存储阶段,基于骨干网,将各个数据源和云端计算中心 16 连接起来,接收从设备端侧、网络边缘测量的数据,利用云计算技术进行数据存储。数据云存储主要负责数据管理和存储,使得大量数据(在用户授权的情况下)可以被高效地存储、检索和处理。在数据预处理阶段,原始数据经过清洗、转换和标准化等操作,可以减少数据中的噪声和干扰。云端计算,通过分布式计算、GPU 加速等技术,提供强大的计算资源,对数据进行搞笑的处理和优化,为后续的模型训练做好准备工作,进一步提高模型的性能和鲁棒性。第三步是预训练与微调。首先,模型预训练阶段通过使用大规模的数据集和强大的计算资源在云端进行。采用数据增强和样本均衡技术,通过旋转、缩放和剪裁等操作,增加训练数据的多样性和泛化能力,减少模型的过拟合问题。基于骨干网,连接数据源、云端计算中心和模型训练环境,为模型预训练提供可靠的数据支持。基于经过预处理后的数据和云端计算技术,AI 大模型经过大量的迭代训练,学习丰富的特征和模式。在模型微调阶段,AI 大模型在预训练模型的基础上进行。采用迁移学习技术,将预训练好的模型权重应用于目标任务中,通过微调模型的特定层或添加自定义层,使模型更好地适应目标任务的特征和要求。同时,在模型预训练与微调阶段,通过模型压缩和优化技术,采用剪枝、量化、蒸馏等操作,减少模型的参数和计算量,提高模型的推理速度和资源利用效率。第四步是推理与生成,分别是内容生成、用户输入和内容推理。其中,内容生成技术是推理与生成过程中的核心,用户输入是推理与生成过程中的重要组成部分,内容推理对是推理与生成结果的补充。17 在内容生成阶段,采用云端计算技术,AI 大模型利用深度学习模型和自然语言处理技术,将用户输入、预训练模型和推理算法相结合,生成符合用户需求的高质量内容。在用户输入阶段,接入网是连接终端设备和骨干网的网络层,负责将用户的请求和输入传递给云端计算中心,并将生成的结果返回给用户。基于骨干网和接入网,将云端生成的内容传输到网络边缘和设备端侧的用户。利用语音识别、图形识别和自然语言处理等技术,用户可以通过文本输入、语音输入、图像输入等形式向 AI 大模型输入信息。在内容推理阶段,根据生成的内容和用户反馈输入,对 AI 大模型已有内容进行推理和补全。采用模型集成与融合技术,通过对上下文信息的理解和推断,将多个模型的输出进行集成和融合,综合不同模型的优势,以获得更好的生成和推理结果。最后,设备端侧用户接收并存储推理结果,将其作为用户数据进行测量存储,以供后续训练和改进 AI 大模型使用。这些用户数据包含了用户的偏好、行为模式和反馈信息,它们被整合和加入到训练数据集中,用于模型的进一步优化和提升16。4.1.2 GAI 关键技术关键技术 生成式人工智能具备的强大功能,离不开背后技术的发展与支撑。GAI 关键技术主要包括 Transformer、Diffusion Model 等。Transformer 是一种序列建模方法,可应用于自然语言和视觉处 18 理任务2324,下面以自然语言处理视角进行论述。如图 4-2,它包括编码器和解码器两个主要组件。在编码器中,输入序列首先通过词嵌入将每个元素转换为向量表示。接下来,经过一系列的编码器层,每个层由自注意力结构和多头注意力机制组成。自注意力结构通过计算每个元素与其他元素之间的相关性,为每个元素分配权重,以捕捉输入序列内部的相关性和全局上下文信息23。多头注意力机制通过并行计算多个注意力头,从不同语义角度对输入序列进行建模,提高了模型的表达能力。每个编码器层还包含前馈神经网络子层,用于对每个位置的隐藏表示进行非线性变换。在解码器中,除了自注意力结构、多头注意力机制和前馈神经网络子层,还引入了编码器-解码器注意力子层。这个注意力子层用于对输入序列和输出序列之间的相关性进行建模,以便在生成输出序列时参考输入序列的信息。通过多个解码器层的堆叠,解码器能够逐步生成目标序列,并考虑到源语言的上下文信息。Transformer 的处理步骤包括:首先,输入编码,将输入序列转换为向量表示。通常使用词嵌入技术来表示输入序列中的每个元素。其次是编码器层,由多个相同的编码器堆叠而成。将输入序列进行编码和抽象表示,捕捉输入序列的语义信息和全局上下文,输出编码矩阵。最后是解码器层,由多个相同的解码器堆叠而成。将编码器层的输出矩阵解码为目标序列,并考虑到源语言的上下文信息23。19 图 4-2 Transformer 示意图23。图 4-3 Stable Diffusion 示意图4748。Diffusion Model 是一种用于图像生成的先进技术,它通过多个步骤实现从噪声图像到高质量图像的生成。如图 4-3,它包括编码器、解码器、学习的条件、采样阶段和去噪阶段4748。在编码第一阶段,原始图像经过预处理,然后通过编码器网络进行编码,将输入图像转换为潜在图像,捕捉输入图像的关键特征和语 20 义信息。然后,获取学习的条件,这个过程是从编码器网络中提取的特征或其他输入的条件信息,用于指导生成过程。接下来,在采样阶段,对潜在图像进行采样,生成一系列采样向量,作为生成器网络的输入,用于生成对应的图像。最后,在去噪阶段,通过逐步迭代更新图像,在每个迭代步骤中使用生成器网络和学习的条件,从噪声图像中恢复出高质量的图像。Diffusion Model 采用 VAE(Variational Autoencoder)、条件编码器和 UNet。VAE 由编码器和解码器组成。编码器可以对图像进行压缩,这会忽略图片中的高频信息,保留重要的深层特征。解码器将去噪后的潜在图像恢复到的原始像素空间4748。在 Diffusion Model 中,条件编码器采用的是 CLIP(Contrastive Language-Image Pretraining)编码器。CLIP 编码器是一种基于对比学习的模型,通过同时训练一个视觉编码器和一个语言编码器,将图像和文本映射到共享的潜在空间。通过结合 CLIP 编码器和其他处理步骤,Diffusion Model 可以在生成和去噪阶段中利用图像和文本的语义信息,实现更准确和有语义一致性的图像生成4748。UNet 是一种经典的图像分割模型,由编码器-解码器组成。编码器部分由一系列卷积层和池化层组成,用于逐步提取输入图像的特征,并减少空间维度。解码器部分对编码器的输出进行上采样和特征融合,逐步恢复图像的空间尺寸,并生成分割结果。UNet 的作用主要是实现高质量的图像分割。通过 UNet 的编码器部分,它可以从输入图像 21 中提取低级特征,捕捉图像的边缘和纹理等细节信息。解码器部分逐步恢复图像的空间尺寸,并将低级特征与高级特征进行融合,从而准确地分割图像中的目标区域。UNet 能够处理各种大小和形状的目标,并具有较好的鲁棒性和泛化能力49。4.2 意图驱动网络技术意图驱动网络技术 4.2.1 SGN 知识图谱技术知识图谱技术 除了深度学习和强化学习外,知识图谱50在意图驱动网络中扮演重要角色。服务生成网络(Service Generation Network,SGN)的知识图谱是一个结构化的、语义化的知识库,用于存储和组织与服务生成相关的信息和知识。SGN 知识图谱是连接各种数据源、整合多模态信息的关键。SGN 的知识图谱包含以下要点:(1)实体和关系:知识图谱中的实体是各种与服务生成相关的概念和对象,如服务类型、用户需求、服务提供商、数据集等。实体之间的关系表示它们之间的联系和相互作用,如服务类型与数据集之间的关联、用户需求与生成的服务之间的匹配关系等。(2)多模态信息:知识图谱不仅包含文本信息,还可以包含图像、音频、视频等多模态数据。这使得 SGN 能够更全面地理解用户需求和生成更多样化、富有表现力的网络服务。22(3)知识融合:知识图谱是从各种数据源和知识库中整合得到的,包括结构化数据、非结构化数据和人工(专业人士)构建的知识。通过知识融合,SGN 能够将不同来源的知识进行统一管理和使用。(4)语义表示:知识图谱采用语义化的表示方式,使用 RDF(Resource Description Framework)或OWL(Web Ontology Language)等语义表示语言来描述实体和关系之间的语义关联,以便于机器理解和推理。(5)查询和推理:SGN 利用知识图谱进行数据的查询和推理,从而快速地获取相关信息和生成智能化的服务。通过知识图谱的推理能力,SGN 可以更准确地匹配用户需求和生成符合要求的服务。知识图谱在 SGN 中充当了信息整合和语义理解的桥梁,它为SGN 提供了强大的知识管理和推理能力。通过不断丰富和完善知识图谱,SGN 可以持续学习和进化,为用户提供更加智能化、个性化的服务。4.2.2 意图驱动意图驱动 SGN GAI 赋能的意图驱动层基于知识图谱、强化学习、深度学习等基础模型库或算法进行 GAI 大模型训练,以获得大型语言模型(LLM,large language model)和大型决策模型(LDM,large decision-making model)。意图驱动网络技术是一种人工智能网络技术,旨在通过理解用户的意图和需求来驱动网络的服务和行为。这项技术基于自然语言处理 23(NLP)和机器学习,旨在实现更智能、更个性化的网络服务体验。意图驱动网络技术的主要特点包括:意图识别:意图驱动网络首先通过 NLP 技术解析用户的自然语言输入,从中识别出用户的意图。例如,用户可能提出查询、请求、建议等不同意图。意图理解:技术会进一步理解用户意图的具体内容和需求。通过深度学习和自然语言理解技术,它可以从用户的输入中提取关键信息,识别重要的实体、动作和关系。服务生成:一旦理解了用户的意图,意图驱动网络将基于意图的信息生成相应的服务或响应。这可能涉及到从数据库中检索信息、调用特定的功能模块、或执行特定的操作。个性化体验:意图驱动网络技术能够根据用户的个性化需求和历史行为(在用户授权情况下),为每个用户提供定制化的服务。它能够学习和适应用户的喜好和习惯,提供更加符合用户期望的服务。实时响应:意图驱动网络是一个实时的系统,它能够快速地处理用户的请求,并给出即时的响应。这使得用户能够获得更高效、更便捷的网络服务体验。意图驱动网络技术在各个领域都有广泛的应用,包括智能助理、智能客服、网络推理、自动化网络配置等。SGN 通过意图驱动网络,使得网络服务变得更加智能化、个性化,满足用户不断变化的需求,提高了用户体验和网络效率。意图驱动 SGN 详细展示了基于 LLM 模型与 LDM 模型,从用户 24 意图输入到智能决策生成、智能网络解决方案自优化的整体流程大致如下。首先,用户输入自然语言意图文本,其中包含网络设计、规划、配置、运维等需求。然后,利用 LLM 模型进行生成式 AI 意图转译,从中挖掘用户对网络可靠性、成本开销等方面的需求信息。接着,通过用户输入的意图进行 LDM 模型的训练,使用网络状态和意图反馈进行标签任务的预训练、重训练和微调,生成智能决策方案。最后,利用映射层闭环反馈进行 GAI 优化,以确保决策方案的意图满足和验证,包括支持网络协议、自动设计网络切片和遥测分析等智能管控功能。这样由 GAI 赋能的意图驱动生成的智能方案,包括自动设计、优化部署和智能管控三个阶段。4.3 网络自动化配置网络自动化配置 4.3.1 网络自动化配置简介网络自动化配置简介 即使基础技术已经有所演变,网络通常都是由手动构建、操作和维护51。手动网络配置可能会导致不一致、配置不当和网络不稳定,难以提供数字企业运维所需的高水平服务。同时,传统手动网络配置和更新方法过于缓慢且容易出错,无法有效支持快速转换工作负载要求的需求。自动化可以帮助您实现网络管理流程标准化,施行最佳实 25 践。网络运维团队可以快速、轻松地规模化交付服务,并缩短服务中断时的问题解决时间。通过实现网络资源和服务管理自动化,网络运维团队可以提高敏捷性和灵活性,高效地支援现代企业需求51。网络自动化使用可编程逻辑来管理网络资源和服务。相比用户手动操作,网络自动化可以让网络运维(NetOps)团队更快地配置、扩展、保护和集成网络基础架构与应用服务。网络自动化消除了管理网络所需的手动步骤,例如登录路由器、交换机、负载平衡器和防火墙以手动更改配置,然后注销。网络自动化离不开在操作系统(OS)命令行界面(CLI)级别上编程的链接脚本或预打包的自动化软件。实现网络自动化的方法有很多种,并且有很多网络组件可以实现自动化。大多数网络自动化解决方案都是以下两个方案的折衷:命令行自动化和自动化软件51。从最基本的层面上讲,可以使用标准 CLI 命令和参数来自动化网络组件51。例如,Linux 操作系统管理员可以运用 Bash 运算符,根据前面命令的成功(&)或失败(|)来链接事件。或者,用户可以将命令列表编译成文本文件(称为 Shell 脚本),从而通过一个执行命令一次性重复执行所有命令。自动化软件产品可以将网络任务整合到预打包的程序中,用户则可以从应用的前端选择、调度和执行这些程序。例如,红帽 Ansible自动化平台可以将应用编程接口(API)、插件、清单及模块打包成用户可以浏览、选择和运行的 playbook,以自动处理网络权限和网络,26 从而跨服务提供商实现网络配置、安全防护、编排、置备等的自动化。4.3.2 LLM 自动化自动化网络网络配置配置 大型语言模型 LLM 或者大型决策模型 LDM 是潜力巨大的实现网络配置自动化的技术。SGN 采用大型语言模型或者大型决策模型完成命令行自动化和自动化软件的功能,即直接用 LLM 或者 LDM 来实现命令行自动化和自动化软件。例如,当 LLM 训练数据集合中含有网络配置相关的 bash 命令时,对 LLM 训练网络配置 Bash 命令,当 LLM 具备网络配置泛化能力的时候,并在孪生体中测试验证符合一定指标预期,可通过 LLM对实际网络系统进行配置。再如,Yang/Netconf 模型是常用的网络配置方案,SGN 通过 LLM来实现 Yang/Netconf 模型的大致思路如下。(1)构建 Yang 模型:大语言模型的配置 Yang 模型参数、状态信息和操作。Yang 是一种用于建模网络配置的语言,可以定义数据模型和数据之间的关系。大语言模型可以对 Yang 模型进行各种选项和属性配置。(2)Netconf 服务器实现:实现一个 Netconf 服务器,用于处理来自客户端的配置请求和查询。这个 Netconf 服务器可以根据 Yang 模型来解析、验证和执行配置请求,然后将结果返回给客户端。(3)网络设备配置:将网络设备配置信息以 Yang 格式定义。27 Netconf 服务器将接收客户端的配置请求,并通过大语言模型将其转换为针对网络设备的相应 Yang 配置操作。(4)客户端操作:开发一个 Netconf 客户端,用于与 Netconf 服务器进行交互。客户端可以发送配置请求、查询状态信息,以及执行相关操作。客户端需要了解大语言模型的 Yang 模型定义,以正确构造和解析 Netconf 消息。(5)支持回滚和验证:Netconf 支持回滚和验证机制,可以在通过大语言模型配置网络设备之前进行预先验证,确保配置操作的正确性。同时,配置操作可以在事务中执行,如果配置失败,可以回滚到之前的状态,确保网络设备的稳定性。(6)网络拓扑管理:如果大语言模型部署在多个服务器上,可能涉及到多个网络设备的配置。在这种情况下,需要支持网络拓扑管理,以确保大语言模型在各个服务器对网络配置的一致性。(7)安全性考虑:在配置网络时,需要考虑安全性问题。确保Netconf 服务器和客户端之间的通信是加密的,只有授权用户才能进行配置操作。此外,还可以限制对敏感配置的访问权限。(8)监控和日志:实现对大语言模型配置网络过程的监控和日志记录,记录配置操作和系展开阅读全文
咨信网温馨提示:1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,个别因单元格分列造成显示页码不一将协商解决,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前可先查看【教您几个在下载文档中可以更好的避免被坑】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时联系平台进行协调解决,联系【微信客服】、【QQ客服】,若有其他问题请点击或扫码反馈【服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【版权申诉】”,意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:0574-28810668;投诉电话:18658249818。




2023服务生成网络白皮书.pdf



实名认证













自信AI助手
















微信客服
客服QQ
发送邮件
意见反馈



链接地址:https://www.zixin.com.cn/doc/1290494.html