工体元宇宙来了！高通徐晧：5G+XR赋能数实融合新愿景

7月6日，在中赫集团于北京举行的工体元宇宙GTVerse发布会上，中赫集团携手中国移动、高通公司共同发布了5G无界XR赛事体验方案，共同探索以5G、XR为代表的先进技术在智慧体育场景下的应用，助力北京新工体打造数实融合的全新应用场景。
 
5G+XR赋能的“数实融合”新愿景
 
高通公司中国区研发负责人徐晧博士在发布环节进行了主题演讲，详细阐释了依托中赫集团、中国移动和高通公司领先优势，5G无界XR赛事体验方案的先进性和广阔的商业部署前景。以下为徐晧博士的演讲内容实录：
 
 
 
各位来宾、各位专家、各位线上线下的朋友，大家下午好！非常荣幸有机会为中赫集团、中国移动、高通三方发布做技术解读。我们今天的发布是关于5G+XR如何赋能全新的体育赛事体验。
 
今年是中国5G牌照发放的三周年。回顾过去的三年，5G在全世界得到快速的商用和发展。从终端数量、基站数量和5G应用来说，中国都走到了世界的最前列。5G不仅应用于智能手机，还能够在各行各业推动不同应用场景的创新。其中，
几个应用场景非常突出，包括工业4.0，无界XR，车载网联和自动驾驶。在今天的工体元宇宙发布会上，我将专注于介绍其中一个应用，那就是无界XR及其在元宇宙中的运用。
 
实际上，每个人对元宇宙都可以有自己的解读。下面我将介绍，从通信技术的角度来说，元宇宙是一个什么样的概念？如何通过5G、6G和AI技术来赋能元宇宙的落地和部署？从物理世界来说，万物互联和人与人的互联在一定程度上得以实现。在3G、4G和5G网络发展，移动互联网和海量物联网得以实现的同时，产生了非常多的数据，这打造了一个庞大的数字世界。构建于物理世界之上的数字世界，催生了数字孪生的概念。对数字孪生很重要的技术需求，是需要有非常可靠的、高速的、低时延的技术，来支持它与实体世界的连接。而5G等先进通信技术能够满足它的核心需求。
 
为什么说5G是通向元宇宙过程中非常核心的技术？因为将虚拟世界和物理世界、数字世界融合，需要有非常快速的连接，而5G正好提供了支持人与人、物与物之间完全融合的连接技术。第二项在元宇宙中非常核心的技术是XR，它包括AR（增强现实）、VR（虚拟现实）和MR（混合现实）。在工体元宇宙之中，可以有很多VR应用场景。工体元宇宙，将实现实体世界与虚拟世界、数字世界的融合，例如：在虚拟看球的应用场景中，用户可以邀请合作伙伴和家人好友，在虚拟的房子中一起看球。这类场景对通信技术的要求是非常高的。
 
体育赛事场馆部署的主要技术挑战，第一是人口密集，第二是非常高的流量需求，几乎每一个用户都有高速下载和上传的通信需求。而5G凭借高带宽和低时延，可以为大型体育赛事提供非常好的技术支撑。高通帮助合作伙伴在超级碗等大型体育比赛的场馆部署中引入了毫米波技术，能够支持大规模的下载和上传需求。在工体元宇宙中，我们也希望能够运用最先进的5G技术，打造世界一流的观赛体验。
 
下面主要讲一讲，我们如何把XR技术应用到体育赛事观看中。现在XR头显大多体积较大，因为需要在终端侧进行一些渲染或者进行视频播放。如果要实现非常高清晰的视频播放和渲染，会产生非常大的运算量和非常高的能耗。对此，我们将大多数的AI计算放在云端或者边缘云上进行，我们还提供了全新的XR应用架构，支持无界XR和分离式渲染，即把最重要、对时延要求最高的渲染放在头显端进行，把对算力需求非常大的大规模渲染放在云端进行。同时，我们不仅仅是把运算放在很远的云端，而是需要把它放在边缘云，通过非常快速的5G连接，我们可以在头显和边缘云之间实现出色的算力分配。
 
XR头显需要做到空间定位，也需要做到六自由度（6DoF）姿势追踪，以及眼球跟踪和手势识别。这些数据可以快速地通过5G连接传输到5G基站，并通过5G的核心网连接到边缘云。这其中的5G连接时延是20毫秒，而用户从动作到渲染到显示的整个过程的时延是70毫秒。为什么有用户使用XR设备会有眩晕的感觉，这是因为XR设备的时延太高。同时现在XR终端的一大挑战是终端体积比较大，能耗比较高。当实现了分离式渲染以后，可以把XR的头显体积和功耗做到最小，这样才能真正地让XR终端深入到千家万户，深入到每一个人的手中。我们认为XR是非常有前景的下一代计算平台，XR有望达到跟智能手机一样的市场规模。
 
下面我将介绍5G无界XR是怎样落地到工体元宇宙的。工体元宇宙实际上具备非常强大的超级云网，它提供了一个非常好的平台。工体超级“局域公网”不仅支持在公有网络、5G专网、毫米波以及Sub-6GHz网络下的数据传输，同时也支持边缘云架构。XR头显可以通过5G网络连接至工体支持的边缘云，依托支持分离渲染的工体元宇宙系统架构，我们能够推动5G无界XR在工体元宇宙的落地。同时工体元宇宙也有非常好的系统平台、业务平台并支持多形态业务终端，这使我们有机会与中赫、中国移动和所有生态合作伙伴一起，携手推动5G无界XR落地工体元宇宙。
 
基于5G切片的端边协同分离渲染无界XR技术演示，是高通近期与中国移动合作，通过中国移动的5G网络切片与高通的分离式渲染技术实现的，这一技术演示能够助力推动更多应用场景在工体的落地，比如，用户可以沉浸式地观看比赛，通过多角度、高清晰的视频看到进球的慢动作回放；也可以在观看演唱会时，欣赏不同角度、高清晰画质的歌手、贝斯和吉他手的表演。在工体这样一个应用场景中，高通的先进无线通信技术能够得到非常好的应用。
 
我们期待和在座的合作伙伴一起推动5G技术及AI技术在工体的应用，打造更好的智慧体育体验。最后，预祝工体成为北京最靓丽的一张明信片。谢谢！
 
 
前沿技术演示，5G+XR生态携手创新
 
在工体元宇宙GTVerse发布会现场，高通还联合中国移动、爱奇艺奇遇、世炬、共进、当红齐天、银河威尔、梦想绽放等多家合作伙伴，带来多项XR相关前沿技术演示。
 
业内首次基于5G切片的端边协同XR分离渲染技术提升无界XR新体验
 
 
 
高通和中国移动携手在现场展示无界XR（Boundless XR）技术演示。演示基于爱奇艺奇遇 Dream Pro VR一体机（搭载骁龙XR2平台）、采用中国移动终端切片解决方案的小米智能手机（搭载骁龙移动平台）以及中国移动研究院联合世炬、共进研制的 5G 家庭小基站（基于高通FSM100 5G RAN平台）共同完成，利用当红齐天提供的沉浸式互动内容并基于SoReal VR分布式内容平台管理，端到端地验证了在分离渲染架构下，XR用户能够利用5G提供的高速率低时延传输来协同边缘云侧进行实时渲染，同时结合XR 终端侧的本地优化渲染来提供低时延沉浸式无界XR体验，为未来XR用户随时随地体验栩栩如生视觉效果和无拘无束的XR体验奠定了坚实的基础。
 
基于5G超高速网络端到端XR直播产品GVR“第二现场”开启未来观赛体验

银河威尔科技有限公司（GVR）是拥有全球领先的专业级三维直播交互式技术的创新公司，致力于未来顶级三维体验的规模化生产。银河威尔科技公司（GVR）采用自主研发的三维交互式直播产品——GVR“第二现场”，通过北京移动的5G切片网络和搭载骁龙5G调制解调器及射频系统的5G CPE设备，将远端训练基地的训练实况以身临其境的画面和炫酷的AR特效，实时同步到工体元宇宙GTVerse发布会现场的爱奇艺奇遇Dream Pro VR一体机里。未来，人们可以通过穿戴式头盔，跨越时空的限制，用数字化身的方式体验亲临现场观看比赛，还可以欣赏盛大的虚拟烟花表演，体验一个基于5G超高速网络下的元宇宙虚拟世界。
 
首个基于计算机视觉技术的“追光”6DoF交互系统

梦想绽放（原名爱奇艺智能），是一家由爱奇艺内部孵化、独立运营，专注于虚拟现实（VR）技术、产品与内容研发的科技企业。秉承“产品+内容”的双轮驱动战略，梦想绽放致力于成为中国VR娱乐生态的开创者和引领者。在工体元宇宙GTVerse发布会现场，梦想绽放利用其奇遇Dream Pro VR一体机展示了基于计算机视觉技术的“追光”6DoF交互系统。该系统可实现头部和手部双6DoF空间体感定位，手柄定位精度可达毫米级别。奇遇Dream Pro搭载业界领先的骁龙XR2平台，配备8GB大运存、4K超高显示屏。