网易云信陈功：体验共享和无限融合是云通信未来的进化方向丨 QCon
不知不觉中，你一定接触过云通信技术。在疫情的推动下，即时通讯、。。、实时音。。等技术在各行各业得到了广泛应用。在云能力的加持下，通信行业迎来了新的发展浪潮，加速了底层技术的迭代升级。
随着多种云通信技术在各种场景中的广泛应用，越来越多的待解决问题暴露出来。如何处理场景的复杂性？云通信行业未来发展趋势如何？作为网易智慧企业旗下统一通信的云服务专家，网易云信给出了答案。
编辑InfoQ在QCon 2021全球软件开发大会上有幸采访了网易智能企业技术VP陈功先生，他亲自为我们讲解了云通信行业的要点。
以下是采访的文字。InfoQ:请陈老师做个自我介绍，大致介绍一下你的职业发展。陈功：大家好，我是网易智慧企业的技术VP陈功。我是08年博士毕业的，研究生阶段的主要研究方向是计算机视觉。
当时接触了很多图像和。。领域的相关技术。工作后，我也在这方面延伸。我加入了两家半导体公司，从事多媒体和视听相关的工作。幸运的是，我在Intel工作的时候接触到了WebRTC。
是国内最早专注于WebRTC的团队之一，参与了开源WebRTC套件OWT的前身Intel Collaboration Suite for WebRTC的架构设计和研究。
后来加入了一家创业公司，现在网易云信团队已经深耕云通信行业6年多了。InfoQ:请简单介绍一下网易云信的统一通信云，谈谈它的核心技术。陈功：目前来看，
云通信行业呈现更广更深的融合趋势。网易云信的统一通信云也顺应了行业发展趋势，为市场提供了丰富的云通信产品矩阵，通过“音。。即时通讯其他”的融合商业模式，打造行业核心竞争力。
网易云信的产品不仅具备传统的统一通信能力，如短信、语音、云呼叫中心，还具备互联网通信能力，如IM、RTC、。。、点播、互动白板等。通过多个SKU的组合，打造多场景的产品应用解决方案。
深度赋能各行各业的企业客户。网易云信的核心技术紧紧围绕“音。。即时通讯其他”的整合与赋能，不仅包含在云通信关键技术上的多年沉淀
如：大规模分布式传输网络、高性能通信服务、高效。。编码、智能音频处理、弱网络体验保障等。还包括深度赋能客户的场景化技术，如智能码超清技术、音频空间音效、语音/。。特效、虚拟影像等。
依托AI技术(计算机视觉、机器学习)与传统算法和基础通信能力的结合，构建“AI”智能通信云服务平台。InfoQ:音。。技术也是统一通信云的主要技术之一。从行业的角度来看，
能否谈一下当今云通信行业的概况，处于什么样的发展阶段？AI的发展给云通信行业带来了哪些变化？陈功：当前云通信行业呈现出欣欣向荣、蓬勃发展的态势，尤其是借助这两年的疫情。
让相关从业者和资本市场对行业的发展有非常乐观的预期。我觉得整个行业还是处于高速发展的黄金阶段。五年多前，云通信行业对于很多人来说还是比较陌生的。当时的行业从业者更多的是在修炼内功，打磨技术的阶段。
经过多年的技术积累和基础设施升级，云通信使能的创新场景遍地开花，行业内服务商的价值也得到广泛认可。目前云通信的应用领域相对集中，娱乐、社交、在线教育是两个重要场景。预计，
随着AI技术和5G升级带来的更多机遇，以及沉浸式和元宇宙概念带来的巨大想象空间，行业将朝着与业务更深入、更紧密结合的方向快速发展，并将看到更广泛、更多元化的应用。云通信将无处不在。
AI和云通信有非常好的结合，主要体现在技术和体验两个维度。在技术层面，AI对底层技术的加持带动了行业的技术升级。越来越多的音。。算法寻求与AI结合。
如：。。超分、编码、音频降噪、场景检测等，都是典型的落地案例，“AI+音。。”能够大幅提升传统算法的质量。网易云信拥有自己的AI 实验室，进行AI 相关技术的前瞻性布局和研究。在今年，
团队聚焦AI 音频降噪和AI 音乐检测方向的两篇论文也被声学顶会「第50 届国际噪声控制工程。。」收录，获得了国际公开认可。在体验层面，
AI 技术在产品体验的升级、新鲜玩法的塑造、以及更逼真的场景营造方面有非常大的技术优势。AI 为云通信行业带来了更多、更有趣的玩法，如：AI 特效、动画合成、表情迁移等。展望元宇宙的潜在市场，
AI 技术将会加速云通信更大规模的普及和应用，并为终端用户带来焕然一新的体验和感受。InfoQ：网易云信身处行业变化中，处在什么位置？多年来的技术演进路线是什么？陈功：在即时通讯方面，
网易云信作为业内最早可以承载亿级日活的即时通讯平台，无论是日活、覆盖终端数，还是消息分发量，网易云信目前均处在行业第一的位置。在音。。通话方面，网易云信近年来深耕音。。技术，经过多年的厚积薄发，
目前也已跻身行业第一梯队。2020 年，网易云信发布的新一代音。。技术架构进行了全流程的技术升级，基于该技术架构打造的「音。。通话2.0」融合了AI +音。。的算法优势，
为我们的企业客户提供更灵活、稳定、流畅、易用的音。。技术服务。其他方面，网易云信提供的一站式融合通信服务，在云通信产品的覆盖度以及协同服务上也是行业内首屈一指的。
在Gartner 近期发布的《CPaaS 市场指南 (Market Guide for Communications Platform as a Service)》 研究报告中，网易云信凭借自身在统一通信、5G 消息平台、低延时。。、实时音。。、基于AI 的音。。优化，
以及通信安全等方面的领先优势入选了此份报告，被列为全球。。性供应商。技术演进路线可分为三个方向：横向开拓、纵向深入、融合创新。
横向开拓：网易云信在最初IM 即时通讯技术能力的基础上不断演进，目前已经扩展出包括音。。通话、。。、点播、互动白板等十余种功能，并且依托于团队深厚的技术储备，还在不断丰富产品功能，扩展产品矩阵。
纵向深入：针对云通信的各项关键技术，持续投入技术的攻坚打磨，目前在全球分布式传输网络、高性能通信服务器、智码超清、自适应音频处理、弱网传输对抗等方向上取得了卓著的技术成果，保障了网易云信的核心竞争力。
融合创新：通过跨产品SKU 的底层技术融合，展现网易云信产品矩阵的优势，并且通过“AI+音。。”的赋能，打造融合产品的竞争力。比如，通过音。。与内容安全检测的技术融合，
提供了一站式安全通信解决方案；通过RTC 与语音呼叫的能力融合，提供了通话高接通解决方案；通过AI 与RTC 的技术融合，提供了一站式音频/。。特效、虚拟人的解决方案等等。诸如此类，
都是网易云信融合创新的体现，并且依托网易集团在AI 方向深厚的技术积累，网易云信会一直走在创新前沿。InfoQ：目前行业内云通信产品也比较多，行业相对繁荣，在您看来企业在选择产品时，
需要着重关注哪些方面？陈功：一方面，服务提供商的品牌和口碑是企业看重的，口碑则包括了质量是否可靠、服务是否稳定，也包括了作为服务提供商，是否足够了解客户的行业和场景。比如，
客户在新场景探索过程中可能遇到的“坑”，服务提供商若能具备充足的相关经验，给予深入的指引，为客户降低接入和上线成本，这是客户乐于看到的理想状态。网易云信作为网易集团的toB 团队，
与集团内的兄弟BU 长期保持紧密的合作共建，在游戏、娱乐、教育等多个场景拥有多年的丰富的实战经验，是非常懂行业和客户的服务提供商。另一方面，一站式的云通信能力也很关键。客户在打造产品时，
通常需要不同的云通信能力单元，如：音。。、IM、互动白板、一键登录等能力，若是娱乐社交行业的客户，可能还需要美颜、内容安全检测等。要实现这些功能，如果对接多个服务提供商非常繁琐，面对多个技术支持团队，
在配合上也很低效。这种情况下，服务提供商如果能提供一站式的能力，将会是很大的优势。网易云信在产品设计上就站在了客户的视角，不但提供丰富的云通信产品矩阵，在美颜和内容安全检测方面也有自研产品，
完美契合客户的终极需求。InfoQ：与其他同类产品相比，网易云信云通信产品的技术优势是什么？陈功：网易云信的技术优势体现在不同的维度上。架构优势：
即时消息：高性能的IM 服务端架构，能够支撑万人超大群、千万级聊天室、百亿级消息的IM 业务，并且能够做到“水平可扩容、垂直可隔离”，高效支持日活过亿平台的扩容和升级。
音。。：新一代音。。架构基于最新的WebRTC 演进，服务端通过SFU 和MCU 的融合，可以灵活满足通用业务服务的扩展需求。例如，支持云端的媒体处理和分析有天然的优势。
客户端针对媒体和网络引擎的深度优化，在低性能设备上也能保障高清流畅的通话体验，更好的适配中低端移动设备（这是东南亚出海的痛点），也有利于在IoT、可穿戴设备领域拓展。此外，
RTC 在进行客户端架构重构之后，沉淀出相对于友商的功能扩展优势，比如：音。。主辅流功能、多房间推拉流功能等，都已在客户的真实场景得到落地验证。
基建优势：网易云信自研了全球大规模传输网（WE-CAN），它是一个基于公共互联网的overlay，是网易云信业务层的传输基座，一个独立于具体业务的通用传输系统。在架构设计之初，
便系统性考虑了产品架构的竞争力，主动规避了其他传输网的架构缺陷，相比于其他软件自定义传输网络，在传输模式多样化及成本方面都具备显著优势。
传输模式多样化：提供多种传输模式，不只支持媒体流，还支持IM 消息、信令，以及通用数据的传输，完美支撑了网易智企多个业务的数据传输。如：网易易盾的海外图片检测服务，
已经在WE-CAN 网络中实现了加速传输，证明了WE-CAN 在传输模型延展性上的巨大优势。成本优势：基于智能调度的传输分级服务，在架构策略层面形成成本优势，
实现在RTC、低延时。。、IM 业务上的成本优化。音。。优势：网易云信在音。。技术上厚积薄发，目前打造的技术优势包括：
弱网体验：分段QoS 策略加上智能流控，将音。。抗丢包边界提升到75% 以上，在带宽利用率90% 的水平线上，可对抗2000ms 的网络抖动。。。体验：自研的。。质量控制（VQC）算法，
结合了网络和性能自适应策略，能够动态跟踪网络指标变化，快速调整。。编码模式和参数，达到最优的画质呈现效果。并且能够根据设备性能的状态来调整部分。。算法复杂度，在保障高端设备极致体验的同时，
兼容更多的终端设备。。。画质：智码超清技术，以人眼主观体验为目标，融合网易云信自研NE264 编码器和高性能AI 。。超分，以及去噪、去伪影、ROI 等画质增强处理技术，
通过场景智能分析和自适应参数配置，让用户在同等码率下获得更加极致的超高清视觉体验。空间音效：网易云信基于主流的双耳Binaural 方案，
利用高阶Ambisoics 编码、HRTF、房间建模和人工混响技术，为实时语音通信带来了真正的3D 空间音效，具有更好的方位效果。同时支持不同耳机和适配和补偿，达到频响均衡，外化感和真实感更好。
网易云信也是行业内首家支持6DoF 空间音效的服务提供商。融合优势：
IM/音。。与内容安全的技术融合，打造一站式安全通信方案：通过融合网易云信和网易易盾产品推出的安全通，
实现登录1 个后台、对接1 个系统、进行1 次结算就能完成通信与。。+内容安全方案的完整接入，提供极致的一体化快速接入和服务体验优势。
通过检测模块前置、底层算法融合、服务混合部署等网易云信与网易易盾产品融合，极大降低了因需要内容安全检测而引入的通信费用，在成本结构上存在本质的优势。RTC 与运营商能力融合，
推出网易云信通话高接通解决方案。通过融合网易云信RTC 和运营商能力推出的通话高接通解决方案，在产品底层进行融合，形成了以应用保活、线路融合呼叫、辅助提醒为核心的融合呼叫完整方案，
实现RTC 与线路通话的打通，帮助提升用户通话的接通率，赋能客户增收提效。RTC 与AI 特效的结合，打造一站式音。。特效产品。
结合了网易云信RTC 和自研AI 美颜、贴纸、虚拟形象的技术能力，推出。。特效产品，通过音。。处理层面的深度融合，实现不同RTC 场景下最优的特效效果和性能。
InfoQ：保证传输质量是通信行业长期课题，网易云信的自研传输网目前有什么技术进展？陈功：网易云信自研的大规模传输网WE-CAN 是基于公共互联网的overlay，它是网易云信业务层的传输基座，
是独立于具体业务的一个通用传输系统。WE-CAN 的核心优势是能够在降低传输延迟、保证传输可靠性的同时降低带宽成本，同时，由于它是独立于业务的，架构上比较重视分层抽象，
所以可以把基础的路由传输加速能力封装套用到不同的业务场景，适应不同的传输需求。作为一个纯软件实现的大型分布式传输系统，WE-CAN 的核心能力是将网易云信在全球的数百个边缘节点组织起来，
通过实时路由来解决任意两个边缘节点间的传输问题。对这部分网内传输质量，我们通过自研传输协议和智能路由算法，以及对节点间QoS 策略的深度优化，达到了很好的效果，尤其在远距离或者跨国传输场景下，
WE-CAN 已经可以达到或接近专线质量。在边缘节点的分配调度上，我们也做了大量的工作，通过对历史数据和实时上报。。的聚合分析，WE-CAN 会给每一个客户端分配到最优的接入服务器，
保证“最后一公里”的传输质量。目前WE-CAN 已经全面支撑网易云信所有业务的各种传输需求，
承担起了包括RTC 实时音。。服务器间极联转发、IM 消息中心到边缘的扩散、。。点播中低延迟场景下对CDN 的替换、数据上报从各地收集节点到数据中心传输加速等等应用场景。除了网易云信之外，
WE-CAN 还成功对接了网易集团内部其他具有传输加速需求的团队，我们搭建了一个HTTP 全球代理加速网络，
对于具有各种RESTful API 或者类似HTTP 调用加速需求的业务场景都可以适用，并且在线上运行稳定，加速效果非常突出。
InfoQ：融合通信未来的进化方向是什么？可否给出一些关键词？陈功：我认为的两个关键词分别是体验共享和无限融合。体验共享：在各场景线上化的过程中，交流沟通的真实感是非常重要的一环，比如一起K 歌，
一起看电影等等场景。传统的线上娱乐受到技术、设备、网络等巨大限制，无法做到真正的体验共享。随着融合通信及相关技术的不断演进，在全高清、低延时、沉浸式的质量保障下，
体验共享所实现的真实世界与虚拟场景的衔接，会是一个新趋势。无限融合：融合通信的未来在于融合，这里的融合既包括了底层通信技术、交叉学科，以及相关功能组件的融合，
也包括了在场景化落地过程中所需的线下与线上资源的整合，以及衍生出的在IP 资源和版权方向上的合作。融合通信有机会从一个技术领域转变为技术生态。
