沙核科技（北京）有限公司

大家下午好！很高兴再次来到SIF沉浸展暨第二届佳能VR创作者大会，我是来自于中国移动咪咕公司的朱佳伟，我所负责的产品线当中很重要的一块就是沉浸式内容。

今天的主题叫可能世界，对比三年前的SIF今天在讨论的东西，就是有更多的可能。我们会讨论到传统的XR内容，会讨论到3D影像对于真实世界的记录，我们会讨论到LBXR的种种发展，我们会讨论到下一代空间计算设备。

所以，本身在这个时间点讨论更多可能性的话题，觉得价值还是非常高。

我今天主要的分享主要围绕着从2020年开始，在这个比较广义的沉浸内容领域里做的一些探索跟实践，我们就开始今天的报告。

首先，介绍一下咪咕公司是中国移动全资一家公司，2014年成立，去年是十周年，我们是中国移动面向于内容领域设立的互联网内容平台公司，所以我们是从传统影音书漫游互联网品类开始做起，不断去演进，往着更多新品类内容去出发。

在过去十一年积累当中，已经成长为国资央企领域最大的文化+科技公司，最大的互联网平台和最大的新媒体平台。在大家所熟悉的体育版权领域，我们基本上已经实现了版权全覆盖。可以看到，顶级的一些赛事，包括顶级的运动盛会都覆盖。如果有各类球迷、各类体育迷，欢迎在平台上体验。

除此之外，在音乐、阅读、快游等等领域都会有，内容的发展跟媒介的进化，会呼唤着我们要做更多新的技术+内容融合尝试。所以，整个沉浸内容也是在这样一个过程当中做的。因为我一直以来都负责这个板块，所以我对于想法，也给小伙伴树立了一个想法，我们分为三个阶段。这三个阶段不是一个替代另外一个，这三个阶段都在做，只是说这三个阶段在启动的时间节点上，跟着当时的硬件、内容跟商业生态有关系的，一共分为三个阶段：

第一阶段，线上XR内容平台。当时因为有了5G的发展，因为有了PICO头显设备的发展，我们发现VR内容、全景内容除在头显端可以用，还可以移植到网页端、手机，所以我们会做很多全景影像互动应用。

那在2019年的时候，推出了移动云VR的产品，目标是汇聚更多线上XR内容，让更多的用户能够体验到，并且把我们原有的一些内容储备能够通过XR这样的形式，让更多的用户能够使用到，这是第一阶段。

第二阶段，现在全国比较火爆落地的大空间平台。这当中也看了很多优秀的作品，觉得它能够让用户在一个相对固定的范围，在一个相对固定的时间里，一直能去体验XR内容，这会很棒。在这个过程当中，因为在一个固定的时间和地点，不太会去掏手机，你会体验一个内容，这也跟LBXR内容不断演进有很大的关系，现在的体验已经比以前好很多。我们首先学习了行业，把这个Flexon Pod的这个Infinity引到了上海，我们也跟敦煌研究院等等一系列合作，出口了自己的大空间内容，也搭建了自己的大空间业务平台，这是第二阶段，我们认为线下通过空间的更新，XR内容是一个很好的手段，也能给大家的数字消费带来一些新的体验。

第三阶段，现在做的跟2023年苹果发布会的Vision Pro紧密相关，也跟现在我们看到的各类型的3D显示终端，包括裸眼3D显示等等一系列相关，这是我们在目前努力的第三阶段，下一代沉浸内容平台。

所以，今天的分享我会在这三阶段当中各自讲一下每个阶段，在技术的突破点、内容的题材包括商业模式上做了哪些工作，希望能够给大家更多的启发。

首先，第一阶段从2019、2020年开始，当时解决主要问题是清晰度问题。那个时候大家都很痛苦，做内容的同时觉得内容没有办法分发到头显，因为存储在头显里面，存储空间不够，流媒体分发CDN成本过高。首先，我们定义了一个VR内容评价模型，对于清晰度有比较清醒认知，可能达到8K的话，360度内容才能看，这是一整个当时的初衷，做了内容品类的标准。

同时，我们汇聚了很多行业里面优质的内容，整体储备量是7.5万小时，VR应用有上千款。这也不是我们自己做，我们和HTC、PICO、沙核做了很多工作，也引入了很多优秀的作品。当时的威尼斯影展作品，在现在我们平台上还能够看到，也有用户给我们很积极的反馈，这是我们第一阶段，更多汇聚清晰度够的内容。

有了这个清晰度够了的内容之后，怎么样让当时只能解码4K的头显，能够播放8K的内容。所以，我们做了一个技术尝试，用了FOV解码技术。我们在用户FOV视角之内，提供比较清晰的解码切片。在FOV视角之外，我们提供的是低清晰度内容，这样的话可以保证在视角范围之内看到的是等效8K画质的全景视频的清晰度。大家也知道，在看VR的时候，不太会很频繁晃动。晃动的情况下，我们把头显时延降到大概100毫秒以内，大家还能够很快恢复到一个清晰画质。

在这样一个技术加持下，做了很多体育比赛，我们看到有CBA、UFC、WTT、冬奥会等一系列超百场的AR直播。我们也在向全行业提供，可以使得180度VR所需的带宽降低50%，360度的降低75%，这是一个。

除了汇聚内容之外，一直有一支团队，不停在制作8KVR优质内容，也会和行业很多合作伙伴一起来做，主要聚焦各省的传统文化，包括非遗、自然风光，覆盖全国十多个省。

进入到第二阶段，LBXR带给我们很多惊喜，能够使多位用户在同一个空间当中同时体验一个3D内容，我们可以讲述更多的科普教育、传统文化、爱国主义、娱乐竞技等等一系列故事，所以我们把这个推出了一个标准产品，叫做咪咕未来空间，能够整合不同的内容、硬件、场地、运营，提供一套标准化部署方案。我们目前已经在两类场地，一个是中国移动营业厅。大家应该平时很少去中国移动营业厅，因为营业厅的客群已经越来越少，也越来越老龄化，我们把这个大空间放到中国移动营业厅，能够实现快速开店，两周就可以。

另外，对于客群年轻化带动，包括收入的带动，有明显效果。首先是年轻化客群占比超过50%，整体经营平效对比传统营业厅有数据统计，大概有400%左右的提升，现在已经在很多地方开始开营业厅的上线，相信大家以后会在更多中国移动营业厅能体验到XR大空间内容。我们也会结合这样一个方案，更多往科技馆、博物馆、商业地产区延伸。我们在上海南京路商场里做无限Infinite内容，运营期间也获得了500多万票房收入。一方面，依托于自己的自由场地。另一方面，通过这套比较标准技术平台，赋能到外部的商业化场地，这是现在主要的合作模式。

也就是说，无论你是硬件方、内容方、场地方、运营方，我们的大平台都能够给大家搭建一个比较合适的商业模式，帮助大家必须快速去大空间落到各种各样的场地。

第三阶段，我会重点说一下，很多用户现在都会比较关注Vision Pro。Vision Pro的合作，我们咪咕公司跟苹果公司是战略合作身份，我们是中国地区唯二的AIVP，就是苹果沉浸式视频合作伙伴。这里有一个概念要理清一下，这边讲的upper immersive video，跟我们今天讲的沉浸内容是一个子集的关系，这是苹果自己定义的一个沉浸内容的格式。我们今天分享里面就简单叫做AIV，我讲AIV就是苹果这样一个格式，我们讲沉浸内容就是比较广义的沉浸内容。

AIV这个内容，很多人都看过，清晰度、临场感，充分发挥了Vision Pro40PPD的效果，带来的感受还是比较突出的。我们可能也是第一批适配了这样一个内容，从编解码标准、从FairPlay的版权保护，我们都能够实现。现在的AIV内容跟美国做到同步的上线跟发行。

所以，我们现在是苹果的AIVP合作伙伴身份，大家现在在苹果体验店里面，如果体验Vision Pro，你们看到的内容，用的应用程序都是我们来提供的。

我自己感觉有了Vision Pro之后，内容的呈现形态、内容的运营空间和内容和用户之间的距离，都会有一次新的定义。这个新的定义来自于两方面，一方面Vision Pro提供了一个这样沉浸体验的框架，框架非常完整，大家做各种各样的沉浸内容的设计都可以参考这个框架。

另一方面，我们把一些内容也带进去了，我们的体育赛事、影视内容，包括现在也能够实现在Vision Pro上搭建了一个UGC平台，大家通过苹果15以上的手机拍摄的空间视频，也能够在UGC平台上传给更多用户看到。

在两个整合之下，会赛事、影视、沉浸视频跟3D都上线在咪咕视频Vision版产品当中。目前咪咕视频Vision版上面已经有21部AIV内容，并且在上次Metallic的这个Apple全球首发上，我们也能做到苹果的全球同步的首发。

这是现在产品当中的一些截图。可以看到，我们在体育比赛的过程当中，能够更多利用空间计算特性，做一些动态体育沙盘。同时，3D内容，不管是通过AI方式转制的3D，或者原生3D内容，也能够在Vision Pro平台播放。

此外，利用空间交互的组件，可以做很多有趣的。第三列这里的画面，你看到的电影当中在下雪，在空间当中也能营造这样的特效。

你看体育比赛当中，动态沙盘里面出现的位置，赛事信息，都可以一目了然，在信息的密度上包括互动的玩法上会更加突出。以及这个布达拉宫纪录片的内容，可以把全景布达拉宫图片跟布达拉宫的平面纪录片做融合，带给大家更深刻的感受。这就是我们现在做的一些工作。

第四列是现在用户自己拍的空间视频，在我们的平台上相当于一个gallery的应用，让更多用户能够体验到空间视频。

截止目前，咪咕视频Vision月均使用次数是16万次，累计播放量破百万次，这是一个让做XR人比较高兴的现象。因为Vision的用户大概只有几万个，月均使用次数是超过终端数，这说明大家开机频率是大大高于传统的XR设备，这对下一代沉浸内容的发展，也是有比较大的帮助。

接下来，我们希望把AIV制作全流程管线进行一些串联跟打通，包括空间视频、空间音频素材的采集，后期制作封装为AIVU，以及我们利用自己的内容安全审核跟CDN，实现这样一个分发，这是我们会做的一些内容。

同时，利用到这样一个空间计算的框架，也希望更多包括佳能在内的3D影像的制作公司做更多的记录真实世界当中，大家有时候还不一定能够有很好的体验，不一定能够有机会去到的地方，能给大家看到更多不一样的世界。包括高速的动态摄影，以及我们会结合空间计算当中一些框架，这次我们也有展示这个内容。它是一个中国传统诗词的内容。会用一些方式记录你呼吸的频率，当你的呼吸频率达到一定节奏情况，我们会认为你的心此刻静了下来，这个内容的剧情会得到继续推进，有点像我们现在讲的冥想或沉浸放松类内容的创新尝试，希望这些内容可以更多具备功能性，这是我们在沉浸内容制作的下一个阶段可能会做的一些工作。

讲一下3D，大概在一两年前，随着裸眼3D终端消费级终端会有一波发展，在当时的情况下我们也会做一定的平台内容，目前已经适配了市面上所有裸眼3D消费电子设备，并且搭建了一个AI2D转3D的平台，目前转至的分钟数大概在12万分钟左右，这12万分钟内容中我们挑选了大概400多个小时做了精修，主要是一些3D影视内容，我们会上线在我们裸眼3D产品，XR产品和Vision Pro产品中，这是我们一直在做的AI  2D转3D的工作。同时，也在牵头一些行业标准和统一规范，除了消费电子终端之外，我们在更多的包括一些行业终端，车载终端、娱乐屏、视力矫正，家庭3D影院，可能要配合一些偏正等场景去做。

总之，在3D领域，我们会更加关注到平台能够给业态做赋能，2D转3D平台我们也会持续提升它的能力，现在重点提升的是4K3D转制能力，以及4K3D实时2转3直播能力，现在我们在奥运会和欧洲杯期间已经打通了，现在要提升到4K的清晰度，这是我们在3D内容平台上，这个更多是指平面3D。

此外，我们也希望能够跟更多合作伙伴合作，目前主要有两方面在做，一方面是内容共创，包括AI V0在内，报四XR、大空间内容在内，我们都会给创作者提供更多的支持，其中AI  V内容创作我们会提供内容制作培训跟一些配套的软硬件支持，3D也是一样，也欢迎佳能跟我们多多合作。

优质IP联合出品，我们也持续在做。

另一方面，内容聚合，现在通过咪咕视频平台我们会开放沉浸视频多格式征集，大家可能会陆陆续续积累一些各种各样类型的沉浸式视频，如空间视频、3D视频、360度、180度等，都希望跟大家进行一些沟通合作，我们也会提供一些体验和测试平台，打造人人可创、处处沉浸的未来体验。

我今天的分享就到这里。谢谢！