3.8亿人次线上观看，这届世界人工智能大会虚拟会场也游戏化了？

时代的年轮总是往前推进，科技的发展亦是厚积薄发。

又是一年一度的世界人工智能大会（WAIC）。7 月 8 日 - 10 日，2021 WAIC 于上海如期拉开未来的序幕，大会以“智联世界众智成城”为主题，围绕“AI赋能城市数字化转型”方向，共探人工智能技术创新与产业落地的前沿进展。

本届大会邀请了 60 多位中外院士、10 多位世界名校校长，李彦宏、马化腾、周鸿祎等超过 150 位业内大咖，以及超 300 家参展企业。可谓是精英汇聚，盛况空前。

作为全球智能领域最有影响力的行业盛会之一，今年的 WAIC 也有了不一样的风景。

由上海东方传媒技术有限公司（简称：SMT）提供的“云端会议”一体化技术整体解决方案迭代升级，带来全新体验。针对全球疫情常态化的特殊背景，在 Unity 实时 3D 技术赋能的基础上，SMT 结合自身创意和科技创新前沿力量，打造了全球“云端虚拟会场 2.0”，将虚拟与现实完美结合。


据 SMT 活动业务部（壹会展）副总监介绍：2.0 和 1.0 最大的差别是载体的改变，从 WebGL 网页版本到移动 APP 客户端。不变的是，虚拟会场突破地域壁垒，使得世界各国前沿 AI 技术得以实现“云端相会”；升华的是细致精良的画面呈现，“游戏式”的操控体验，以及“沉浸式”的功能应用等。



云端虚拟会场 2.0 版本在直播技术、实时在线人数、邀请码认证、网络安全等方面都作了升级。此外，还增加了不少全新功能和应用，如智能接待员、语音判别功能、直播流实时切片、敏感词识别等。


在网络传输方面，云会场已具备了 0.5 秒低延时，以及 8M 每秒高传输码率的特点，为其在 5G 落地应用上做好了充分的准备。

另外，云会场 2.0 通过对 APP、服务器、传输进行加密，并采取验证码登录、云端双备份、跳板机服务器技术等一系列的措施来保障网络安全。

正是基于云端虚拟会场 2.0，才有了“全球同播、亿人同观”，共有超过 3.83 亿人次观看的空前盛会——2021 WAIC。


游戏式操控，沉浸式体验

“更有仪式感、参与感，更具沉浸式体验”，SMT 活动业务部（壹会展）副总监王海强坦言，“这就是 2021 WAIC 虚拟会场最初的设计理念”。


点开 2021 WAIC 虚拟会场 App——壹会展，想必很多人脑海中会不自觉地浮现“科幻”“赛博朋克”等形容未来世界的词语。

“空中之城”与“星空宇宙”的创意结合，不仅烘托出横越现实之上的未来感，同时也为线上参会人员营造了“空中飞船”般的深度场景。

创意虽好，但要具体落实并最终给用户带来沉浸式体验，这并不容易。

据 SMT Unity 技术总监朱名一透露：“WebGL 转向 APP，这是两套完全不同的系统，技术难点跳跃是比较大的。相比去年，2021 WAIC 虚拟会场开发周期多了两个月左右。”


值得提出的是，不仅是整个系统架构要比去年复杂，今年的虚拟会场更强调“沉浸感”与“交互体验”。

首先是在参会形式上，去年 WebGL 虚拟会场中，用户更多是直接入座线上会场，观看会议视频。

而在 2021 WAIC 虚拟会场中，用户可以创建自己的虚拟角色（特指捏脸部分），可以采用 3D MMORPG 游戏的操作方式，在基于线下大会实景开发的全景式虚拟会场中，360 度操控自己的角色。



用户能够像真人一样，走进虚拟会场然后入座，可以观看会议视频、招贴广告以及各种信息。甚至可以实现相互打招呼、留言等丰富多样的交互行为。

“SMT 为 2021 WAIC 提供的虚拟会场整套体系，都是为了给用户带来沉浸式体验，虚拟会场中的角色就如同用户自己一般。这有点像一款沉浸式的游戏，这种体验比去年的 WebGL 直观很多。”朱名一有些兴奋的说到。

当然，虚拟会场要想媲美线下体验，必须得有前沿技术的加持。

自研2.5代混合同步技术

在游戏圈，一些大型 MMO 产品上线前，常以“千人同屏竞技”作为卖点。

据了解，为保证虚拟会场既能够承载大体量用户访问，同时保证复杂交互指令实现的流畅性，SMT 采用旗下独立自主开发 2.5 代混合同步技术，实现了帧同步和状态同步合二为一。

而这也是 2021 WAIC 虚拟会场最大亮点之一。

为了更好的理解帧同步和状态同步，朱名一以游戏作为参照，展开阐释 SMT 这一自研核心技术。

首先是帧同步技术，早期在《星际争霸》（1997年）就有应用，这类即时战略游戏对操作同步要求极高。在行业中，这一时期的帧同步技术被称为“1 代帧同步”。


直到手游时代，帧同步技术慢慢迭代、进化到“2 代帧同步”，包括《皇室战争》《王者荣耀》等都采用了这一技术。主要表现为，游戏不会随着单个玩家掉线变得不流畅或卡死。

不过，朱名一也表示：“帧同步主要针对要求低时延高操作的游戏，传统意义上来讲，同屏的人不能显现特别多。市面热门的吃鸡游戏上限就在百人左右，这在帧同步游戏中已经算很多了。”

如果在一个服务器里要上百人、千人同时在线，帧同步就很难实现。而像《魔兽世界》这类大型 MMORPG 游戏，采用的则是状态同步。它的优点就是支持大体量用户访问服务器，而且支持中途加入。


同样，状态同步也有自身的缺点，即难以进行像《星际争霸》那样复杂的低时延高操作。

正是基于帧同步和状态同步优缺点的思考，SMT 致力于将两种技术混合起来应用到虚拟会场。既要承载的人多，又要可以实现一些复杂指令。

为此，SMT 自研 2.5 代混合同步技术，实现帧同步和状态同步的合二为一。

如前文所述，2021 WAIC 虚拟会场不仅支持同场景多人、半途中增加或删减人，同时也支持操控角色行走、打招呼、点赞、发言等多样交互行为。

这主要就得益于 SMT 自研的 2.5 代混合同步技术。

应用端向前一步

掌握核心技术固然可贵，但如何将核心技术落地到实际应用上，亦是十分重要。

早在去年，Unity 就凭借实时 3D 技术赋能 2020 WAIC。今年 WAIC 由 WebGL 转向 App，也进一步将 Unity 在移动应用开发领域的优势充分展现出来。


Unity 大中华区解决方案开发高级经理孙志鹏表示：“本次 WAIC 的虚拟云会场正是基于 Unity 引擎开发的，Unity 官方技术支持团队主要针对云会场的性能优化与移动端适配提供了支持。”

这主要体现在“协同工作”和“创作优势”两个层面。

具体到项目过程中，Unity 与 SMT 共同开发了高速拉流解码功能，支持正常网络条件下 1080P 分辨率硬件加速解码，并且做了整体的应用性能优化，使其在手机端流畅运行无卡顿。

同时，Unity 官方团队也提供了开发过程中的技术支持，帮助云会场适配各种高中低端的手机设备，帮助定位解决网络同步 Bug。


“因为这次是移动端，我个人认为通过 Unity 开发比较便捷，相对更轻量化。”同时朱名一也表示，“Unity 的 API 系统设计较为人性化，这有效提升了团队开发效率”。

有数据显示，目前市场使用 Unity 开发的游戏和应用平均每月的下载量在 50 亿次，全球前 1,000 最受欢迎手游中有 71% 是用 Unity 创作的。

聚焦到虚拟应用创作上，Unity 也有着“广泛的跨平台支持”、“轻量化引擎”和“强大的实时交互功能”三大优势。

首先，Unity 是一个非常灵活的引擎，用 Unity 开发的内容不但可以完美适配 iOS、安卓、PC、网页等各种主流平台，还能二次开发输出 AR/VR 形式的沉浸式应用，满足各种需求，让创作者们“一次开发，多端部署”，大大节省了开发时间和成本。

其次，Unity 引擎与市面上其他引擎比起来更加轻量化，在移动端开发非常有优势。因为它，开发出来的包体比较小，这样一来能够支持高精度、高画质的 3D 内容平滑、流畅地运行在移动端，而且适配各种中高低端手机。即使是一个庞大的 3D 虚拟空间比如这次的云会场，用户也可以实时地在其中探索、互动而不会体验到延迟，同时保持一个较高的帧率和精美的画质。

最后，如同玩游戏的时候主角可以去打怪、探险并获得实时反馈，作为游戏引擎的 Unity 先天就拥有非常强大的实时交互功能，而这些功能应用在诸如虚拟云会场这种应用里也非常有优势。比如用户选择的虚拟角色之间聊天、互动，在虚拟会场选座等等，都是动态实时进行，就如同打造了一个迷你的游戏世界一样。

此外，Unity 在“虚拟人”领域也有深厚积累。包括去年 Unity 发布的数字人 Demo《异教徒》，今年年初的韩国虚拟偶像《SUA》等，都是通过 Unity 引擎渲染而来。


据孙志鹏透露，Unity 即将在国内推出一套虚拟偶像生产流程。这是在使用扫描 FACS 数据的数字人制作流程基础上，结合游戏行业常用的各种捏脸算法，以及额外修型 BS 做风格化的一套生产流程。

结语

随着 5G 降低延迟、4K 提升画面品质以及其它技术高速迭代，人类探索“Oassis 绿洲世界”的步伐越来越快。

此外，考虑到全球疫情大环境影响，很多企业提倡线上办公，各种大型会议强调在线举行，这也推进了“虚拟会场”等虚拟应用的发展。

目前，国内疫情基本稳定，一些线下活动也逐渐复苏，但线上会议仍不可取缔，也不可能被取缔。7 月 6 日举行的中国共产党与世界政党领导人峰会，也是线上线下相结合的概念。

王海强表示，世界是大同的，也是流通的。线上线下相结合的方式，基本定调为长期发展趋势。

随着移动设备性能以及云端网络算力的大幅增长，以实时 3D 技术为核心的 Unity 如今已经成为创作者首选的数字内容创作工具之一。无论是开发类似于 2021 WAIC 的云端虚拟会场项目，还是业内火热的虚拟偶像，都可以基于 Unity 轻松地成为现实。

正如 2021 WAIC 云端虚拟会场希望通过这种新颖的线上参会形式，给全球用户带来最前沿的科技发展动态和更深度层次的沉浸体验一样。Unity 也在不断打磨引擎，加速行业布局，旨在成为未来虚拟世界的通用创作平台，让创作者们能够更专注于创作本身。

来源：竞核