图灵奖得主 John E. Hopcroft 等 300 余位 AI 学者“穿越”回宋代开国际 AI 大会,这场面你见过吗?

在这里插入图片描述

受访者 | 网易伏羲实验室负责人 李仁杰
整理 | 夕颜
出品 | CSDN(ID:CSDNnews)

在宋代参加一场充满科技感的国际人工智能学术大会是什么体验?在网易旗舰级武侠端游《逆水寒》中,依靠网易伏羲实验室全球首创的沉浸式会议系统,就可以实现体验一把在武侠世界开AI大会的感受。

10月24-27日,第二届国际分布式人工智能学术会议(DAI 2020)在世界观设定为宋代的《逆水寒》中举行。本来应该是气氛严肃的学术会议,在包括图灵奖得主、中国科学院外籍院士John E. Hopcroft教授在内的300余位全球人工智能领域的知名学者们换成各种古装形象后,显得活泼轻松多了。

(会议现场)

这场在游戏中举行的虚拟AI大会能够顺利举办,在背后提供技术支持的是网易的人工智能研究机构——伏羲实验室。

事实上,在游戏中举行虚拟AI大会并非网易首创,早在今年7月,一位美国学者就在《动物森友会》游戏中举办了一场学术活动,虽然有所局限,比如一次最多只能容纳8人同时联机,要借助Zoom才能完成直播,但这种尝试很新鲜,这让网易伏羲实验室负责人李仁杰思考,实验室是否能借助自身的技术优势,让规模更大的国际学术会议在虚拟世界中落地,从而让参会者得到更好的互动体验。

有了这个想法之后,实验室团队迅速行动起来,与主办方南京大学团队沟通后,双方都表示对在虚拟世界中举办大会的想法很感兴趣,于是一拍即合,开始投入设计和研发。

为支持这次大会,在人员方面,网易伏羲实验室设计了一整套沉浸式会议方案,雷火、云信、CC 直播等部门也提供了技术支持。

体验怎么样?

话不多说,此次会议中的用户体验如何?网易花费大力气打造的沉浸式会议方案,是否真的有让人身临其境的感觉?

从场景上来看,虚拟AI大会的还原度还是比较高的,基于《逆水寒》游戏场景构建,古色古香的背景充满江湖气质。

在这里插入图片描述

(会议现场)

为了切合实际需求,大会还专门设立了传统视频会议无法提供的墙展(Poster)环节,方便学者们沟通交流。

此外,学者还可以自由设定虚拟形象,选择自己的发型和服饰。还有一点非常有意思,网易伏羲还会为每位参赛者准备两张特殊的照片,一张是根据真人照片,使用AI智能捏脸技术制作的个人形象照;另一张则是身穿古风服装的虚拟形象大合影。

在这里插入图片描述

(网易伏羲运用AI智能捏脸技术,为参会讲师、学者制作了古风纪念照)

这里使用的AI捏脸技术为网易伏羲全球首创,根据参会者提交的真人照片,通过AI捏脸技术,可以快速生成3D虚拟形象照片。与人脸直接与人脸直接建模的方式不同,网易伏羲发掘了人脸的美学规律,基于算法来制作角色形象。目前,AI捏脸技术已经服务于《逆水寒》、《天谕》等6款游戏和应用。

开这样一场沉浸式会议,技术难度在哪?

这场会议共有300多位AI学者参加,规模比《动物森友会》的8人大了许多倍。规模扩大了,我们会好奇,除了需要足够的本地带宽与网络连接之外,在保证会议顺利进行,难度主要在哪里?李仁杰告诉CSDN,其中的一大难点其实是在于如何降低参会学者的参与门槛。《逆水寒》的客户端超过80G,如果采用传统的做法,参会学者需要花大量时间下载安装,耗时较长。另外,由于每个人的电脑配置不同,会议的运行效果也参差不齐。

问题摆在那里,怎么解决?为了更好的用户体验,伏羲创新使用了云游戏技术。参会者无需下载客户端,只要打开网页,就能加入沉浸式会议,并且获得较好的视觉和互动体验。

解决方案

近两年很火的云游戏技术

什么是云游戏技术?这是个自2018年至今都话题不曾间断过的词汇。特别是到了2018年的下半年,众多巨头争相公布自己的云游戏计划,让大家对云游戏背后的技术更加关注。

从原理上来看,云游戏技术其实就是玩家可以在自己的电脑或者手机平板等设备上,通过云游戏应用连接至云端的高性能设备,所要运行的游戏则由该设备负责运行,同时再将游戏的画面压缩后回传到玩家的设备上,让玩家获得更好的游戏体验。

在本次《逆水寒》游戏中举办的AI大会,背后最大的技术支持就是云游戏技术,参会学者只要通过网页浏览器登陆大会网址,输入会议码,就能便捷地进入会议现场,免去下载超过80G客户端的步骤。

李仁杰表示,未来,沉浸式会议也可以根据活动主办方需求定制解决方案,做到跨平台的无缝连接。

沉浸式会议系统

其次,本次会议值得关注的还有伏羲为此首创的沉浸式会议系统。李仁杰介绍,这套沉浸式会议系统融合了六项专利技术,可以实现免下载随时使用、嵌入式播放PPT、文字或语音群聊及私聊、随时切换多场会议等数十种会议功能。

RTC引擎自研视频质量控制模块

此外,为了兼顾学术会议中文件共享高清晰度和视频共享高流畅性的需求,网易云信RTC引擎使用自研视频质量控制模块,通过实时监测画质、流畅度、性能等关键要素,控制引擎参数,满足30FPS高帧率屏幕共享的需求。

为保证云游戏场景下,大型国际学术会议中实时演讲、讨论环节音视频的流畅度和清晰度,网易云信采用了全球级联组网、弱网对抗等核心技术,确保300人同时在线时系统的可靠性。

未来空间

可以看到,做好这样一场线上虚拟会议并不是一件简单的事,背后需要强大的技术支持和创新,才能保障较好的用户体验。

可喜的是,这套沉浸式会议系统与云游戏技术结合的经验是可以复用的,未来也可以拓展到很多场景,落地和商业前景广阔。除了举办大会以外,沉浸式会议系统还可以应用于教育、文旅、婚庆等多种场景。
在这里插入图片描述

(沉浸式会议系统还可应用于教育、文旅、婚庆等场景)

为了满足未来虚拟世界更丰富的需求,李仁杰表示,网易伏羲还将进一步丰富沉浸式会议体验,包括AI智能捏脸、表情动作迁移、虚拟社群、虚拟接待、VR虚拟现实等体验,也将逐步融入虚拟世界。

此次,300多人的虚拟AI大会在游戏中举行,这是探索沉浸式会议系统+云游戏技术结合创新的再次尝试,为未来虚拟技术应用打开了更多有创意的思路。未来的虚拟世界中,你还希望可以做什么呢?评论区Battle一下,看看谁的脑洞更有创意吧!