在WWDC2023上，VisionPro一经公布就获得了全世界的高度关注。7个月后，这款划时代的产品终于要正式与消费者见面了。
VisionPro能够将数字内容与物理世界无缝融合，基于VisionOS全新交互方式所描绘的未来生活，为我们展现了XR应用的广阔前景。“就像Mac让我们接触到个人电脑，iPhone将人们引入移动时代，VisionPro标志着空间计算的时代到来”，正如库克所说，VisionPro的上市显然会掀起一阵XR的热潮，并为AR/VR/MR打开更广阔的市场，一个新的时代就在眼前。
从十多年前发布的Oculus Rift到今天的VisionPro，更沉浸、更轻便、更低门槛一直都是XR行业的主要发展方向。VisionPro效果惊艳，但其高昂的硬件成本和续航问题对绝大多数消费者来说仍很难接受。而基于云计算理念的CloudXR创新方案则能借助云端算力，将渲染与显示解耦，解放终端设备算力束缚，为XR行业发展提供了新方向。
腾讯云XR实时渲染解决方案
打造低成本、高画质、沉浸式XR体验
腾讯云XR实时云渲染解决方案提供了应用管理、并发资源管理与调度、音视频串流等全套能力，能够将高算力需求的AR/VR内容渲染工作置于云端服务器上运行，并将渲染完毕的画面及声音编码后以音视频流的方式，通过网络实时传输给用户。利用云端算力渲染高质量内容，VR头显只需执行动作捕获和解码显示，极大降低了头显的性能要求，解决了计算能耗高续航短、硬件成本高、重量大等问题，让XR终端设备更加轻量、便携。通过云化XR应用，用户能够随时低门槛地体验高精度XR应用，这将促进XR规模化应用，进一步释放XR行业的潜力。
依托云端可无限扩展的算力资源，云XR方案彻底缓解了VR设备的“算力焦虑”。但想要达到媲美本地应用的丝滑流畅、超高清体验，方案还需要强大的音视频编码、传输等能力支撑。腾讯云XR实时云渲染方案还针对XR应用做了深度优化和功能定制，通过技术创新，为客户实现更低成本、更高画质、更流畅的效果。
- 深厚音视频技术积累：超低延时，超清画质
基于腾讯云20多年积累的优势音视频处理能力以及自研云渲染RTC、极速高清智能动态编码等独有核心技术，腾讯云云渲染可支持8K@144FPS画质，端到端延迟低至60-80ms，可做到高清流畅的原生感体验。此外，XR实时云渲染解决方案通过自适应编码、弹性帧率，结合RTC带宽评估、丢包重传以及智能码控等技术，可确保用户在弱网情况下也能获得清晰流畅的使用体验。
- 固定注视点渲染：提高帧率，节约成本
固定注视点渲染通过重投影降低画面边缘区域的采样分辨率，将屏幕中心的像素已全密度进行渲染，而屏幕边缘的像素则以低密度进行渲染，在确保主观画质的同时，以较低的整体分辨率进行编码-传输-解码，从而有效减轻云端GPU负载，减少编码所需时间，并提高帧率，改善视频播放的流畅度。通过测试，开启固定注视点渲染后，平均GPU负载、视频编码帧率和编码耗时等指标均大幅改善。
- 超分辨率：更⾼画质，更逼真体验
超分辨率可将低分辨率图像通过相关画质重建，呈现相应⾼分辨率图像。通过开启超分功能，能够让3136x1728的画⾯达到与4064x2240相当的画质⽔平，同时服务端GPU的使⽤率负载明显降低，采集和编码的帧率也得到了提升。
- 超视角渲染：改善⿊边问题
超视角渲染可扩⼤渲染画⾯，改善⽤户头部转动改变视⾓时因FOV画⾯⼆次投影引发的⿊边问题。
- MV-HEVC编码：支持3D空间视频，平均压缩收益超20%
MV-HEVC编码标准可显著提升3D视频主客观体验，为了满足潜在客户对3D空间视频的需求，腾讯云MPS迅速打通了从MV-HEVC编码、ISOBMFF（ISO Base Media File Format）容器封装到HLS分发播放的完整链路。对于使用3D空间视频的应用，腾讯云XR实时云渲染方案能通过MV-HEVC编码能力，在同画质下为客户减少20%带宽。
此外，XR实时云渲染解决方案提供轻量的JavaScript、Android和iOS SDK，支持AR/VR眼镜、手机/Pad、PC、VR头盔等多终端，最快一天即可完成方案接入并使用。极致的GPU虚拟化和编码能力，配合全球2800+边缘加速节点，让腾讯云XR实时云渲染方案可以为全球用户提供稳定、流畅的XR体验。
解锁全行业沉浸式未来
腾讯云XR实时云渲染方案应用场景
实时云渲染通过云端的强大算力和资源，使用户无需昂贵的硬件就能享受到高品质的虚拟体验。这也让很多原先遥不可及的XR应用场景能够逐步落地。它已从游戏领域，拓展到教育、零售、会展等传统行业，开始影响我们每一个人。在教育领域，XR应用可提供互动式学习体验，让学生通过视觉和沉浸式内容更生动地理解知识。在商业营销领域，XR能够为消费者提供虚拟试穿、虚拟导览等服务，让消费者能更全面真切地了解商品。在会展领域，线下会场可以通过XR搬上云端，让千里之外的用户也能身临其境地云上逛展……XR正在不断拉进我们与虚拟的距离，改变数字内容与物理世界之间的交流方式。
某日本保险公司一直在积极探索元宇宙与保险结合的新方式。通过腾讯云XR实时云渲染方案，该公司得以在线下峰会/论坛中使用简单的VR设备向参会者展示其创新成果，为参会者提供高品质的XR虚拟会议和虚拟展厅体验。通过云渲染JS SDK，用户还可以通过网页客户端，随时体验他们打造的虚拟空间。汽车行业某公司也基于腾讯云XR实时互动云渲染方案实现了VR云车展体验。通过将汽车在3D应用中进行1：1复原，线下门店仅需准备一个VR头盔就可以突破场地限制，将所有车型展示给消费者，为用户打造可互动式3D实时云端看车体验。
目前腾讯云云渲染已服务海内外600+客户，适配应用超过1500款，每月支撑亿分钟级云渲染服务，在日韩、欧美等海外也有落地案例，已帮助韩国最大游戏开发商Nexon、日本元宇宙平台开发商monoAI等厂商实现实时渲染能力。在《IDC 2023中国实时云渲染解决方案》报告中，腾讯云渲染产品能力&收入规模排名双料第一。在这股XR浪潮下，腾讯云XR实时云渲染方案还将帮助更多企业跨越虚拟现实界限，一同解锁沉浸式未来。
欢迎扫描下方二维码添加音视频小姐姐微信，与腾讯云产研团队直接沟通，了解更多详细信息。
腾讯云音视频在音视频领域已有超过21年的技术积累，持续支持国内90%的音视频客户实现云上创新，独家具备腾讯云RT-ONE™全球网络，在此基础上，构建了业界最完整的 PaaS 产品家族，并通过腾讯云视立方 RT-Cube™ 提供All in One 的终端SDK，助力客户一键获取众多腾讯云音视频能力。腾讯云音视频为全真互联时代，提供坚实的数字化助力。
