高通徐晧:5G+XR赋能的“数实融合”新愿景
日前,在众合集团于北京举办的GTVerse大会上,众合集团携手中国移动,高通共同发布了5G无界XR赛事体验方案,共同探索以5G,XR为代表的先进技术在智慧球场场景中的应用,助力北京新产业集团打造数实融合的全新应用场景。
Ldquo由5G+XR使能,实数融合新视野
高通中国R&D总监徐勇博士在发布会上做了主题演讲,详细阐述了依托中和集团,中国移动,高通的领先优势,5G无界XR赛事体验方案的先进性和广阔的商业部署前景。以下为许绍博士演讲实录:
女士们先生们,专家们,线上线下的朋友们,大家下午好!很荣幸有机会为中和集团,中国移动,高通的发布做技术解读今天的发布是关于5G+XR如何实现全新的体育赛事体验
今年是中国5G牌照发放三周年回顾过去三年,5G已经在全球范围内快速商用和发展中国在终端数量,基站数量和5G应用方面都处于世界前列5G不仅应用于智能手机,还能推动各行各业不同应用场景的创新其中有几个应用场景非常突出,包括工业4.0,无界XR,车联网,自动驾驶在今天的工业元宇宙大会上,我将重点介绍其应用之一,即无界XR及其在元宇宙中的应用
其实每个人对元宇宙都可以有自己的解读下面我就来介绍一下,从通信技术的角度来说,超宇宙是一个什么样的概念如何通过5G,6G,AI技术赋能超宇宙的落地和部署从物理世界来说,万物互联,人与人的互联都可以在一定程度上实现伴随着3G,4G,5G网络的发展和移动互联网,海量物联网的实现,产生了大量的数据,这些数据创造了一个巨大的数字世界建立在物理世界上的数字世界催生了数字双胞胎的概念数字结对的一个重要技术要求是,它需要非常可靠,高速和低延迟的技术来支持它与物理世界的连接而5G等先进通信技术可以满足其核心需求
为什么5G在到达元宇宙的过程中是非常核心的技术因为虚拟世界与物理世界,数字世界的融合需要非常快的连接,而5G恰恰提供了支持人与物完全融合的连接技术元宇宙中的第二个关键技术是XR,它包括AR,VR和MR工业宇宙中可以有很多VR应用场景物理宇宙将实现物理世界,虚拟世界和数字世界的融合例如,在虚拟看球的应用场景中,用户可以邀请合作伙伴,家人和朋友一起在虚拟的房子里看球这种场景对通信技术要求非常高
体育场馆部署的主要技术挑战首先是人口密集,其次是极高的交通需求几乎每个用户都有高速下载上传的通信需求5G凭借其高带宽和低时延,可以为大型体育赛事提供非常好的技术支持帮助高通合作伙伴在超级碗等大型体育赛事的场馆部署中引入毫米波技术,可支持大规模下载上传需求在工业宇宙中,我们也希望用最先进的5G技术来创造世界级的观看体验
下面就来说说如何将XR技术应用到观看体育赛事中目前XR头显大多体积庞大,因为终端端需要一些渲染或者视频播放如果要实现非常高清的视频播放和渲染,会产生非常大的计算量和很高的能耗在这方面,我们把大部分的AI计算放在云端或者边缘云,我们还提供了新的XR应用架构,支持无界XR和分割渲染,即将最重要的,延时要求最高的渲染放在头显端,需要大量计算能力的大规模渲染放在云端同时,我们不只是把计算放在远云中,而是需要放在边缘云中通过非常快的5G连接,我们可以在头显和边缘云之间实现出色的计算能力分配
XR头显需要实现空间定位,以及六自由度姿态跟踪,眼球跟踪和手势识别这些数据可以通过5G连接快速传输到5G基站,通过5G核心网连接到边缘云5G的连接延迟是20毫秒,而从动作到渲染到显示整个过程的延迟是70毫秒为什么有些用户在使用XR设备时会感到头晕这是因为XR设备的延时太高同时,XR终端的一大挑战是终端体积比较大,能耗比较高当分离渲染实现后,可以将XR头显的体积和功耗降到最低,让XR终端真正到达千家万户和每个人的手中我们认为XR是一个非常有前景的下一代计算平台,XR有望达到与智能手机相同的市场规模
接下来我将介绍5G无界XR是如何在工业宇宙中落地的工作元素宇宙其实有一个非常强大的超级云网,提供了一个非常好的平台工作超公网不仅支持公网,5G专网,毫米波,6GHz以下网络的数据传输,还支持边缘云架构XR头显可以通过5G网络连接到工作体支持的边缘云依托工作体元素宇宙支持单独渲染的系统架构,可以推动5G无界XR在工作体元素宇宙的落地同时,公泰源宇宙还拥有非常好的系统平台,业务平台,支持多形态的业务终端,这让我们有机会携手中和,中国移动以及所有生态伙伴,共同推动5G无界XR落地公泰源宇宙
基于5G切片的端到端协同分离渲染无界XR技术演示,是高通近期与中国移动合作,通过中国移动5G网络切片和高通分离渲染技术实现的这项技术演示可以帮助推动更多的应用场景落地到工作体上比如用户可以沉浸式观看比赛,通过多角度高清视频观看进球的慢动作回放,还可以在看演唱会时欣赏歌手,贝司,吉他手不同角度,高清的表演在工体这样的应用场景中,高通先进的无线通信技术可以得到很好的应用
我们期待与这里的合作伙伴一起,推动5G技术和人工智能技术在产业体育中的应用,创造更好的智能体育体验最后祝工体北京最美明信片
前沿科技示范,5G+XR生态创新共进
在公太元宇宙GTVerse发布会上,高通还联合中国移动,爱奇艺冒险,世界火炬,公瑾,风行七天,SoReal,银河威尔,梦想绽放等众多合作伙伴,带来了多场XR相关前沿技术演示。
业内首次基于5G切片的端到端协同XR分离渲染技术,提升无界XR新体验
携手高通和中国移动在现场展示无界XR技术展示基于爱奇艺冒险的Dream Pro VR一体机,搭载中国移动终端切片解决方案的小米智能手机,中国移动研究院联合世界火炬,公瑾研发的5G家用小基站利用风行七天提供的沉浸式交互内容,基于SoReal VR分布式内容平台的管理,端到端验证了XR用户可以利用5G提供的高速低时延传输,与边缘云端协同进行实时渲染同时结合XR终端侧的本地优化渲染,提供低延迟沉浸式无界XR体验,为XR用户未来随时随地体验生动的视觉效果和无拘无束的XR体验打下坚实基础
基于5G超高速网络的端到端XR直播产品GVR第二幕开启未来观影体验。
银河科技有限公司是一家创新型公司,拥有全球领先的专业3D直播互动技术,致力于未来顶级3D体验的规模化制作银河科技公司采用自主研发的3D互动直播产品mdashmdashGVR第二幕,通过北京移动的5G切片网络和配备骁龙5G调制解调器和射频系统的5G CPE设备,将远程训练基地的训练情况以沉浸式画面和炫酷的AR特效实时同步到GTVerse大会现场的爱奇艺冒险梦想Pro VR一体机上未来,人们可以通过佩戴头盔,跨越时空限制,使用数字头像,欣赏盛大的虚拟焰火表演等方式,亲身体验观看比赛,体验一个基于5G超高速网络的超宇宙虚拟世界
第一个基于计算机视觉技术,追六自由度交互系统
梦想绽放是由爱奇艺孵化并独立运营的科技企业,专注于虚拟现实技术,产品和内容的研发坚持产品+内容双轮驱动战略,梦想绽放致力于成为中国VR娱乐生态的先行者和引领者在工体元宇宙的GTVerse发布会现场,梦想绽放以其adventure Dream Pro VR一体机展示了基于计算机视觉技术的追6自由度交互系统该系统可实现头手双6DoF空间体感定位,手柄定位精度可达毫米级Adventure Dream Pro搭载业界领先的骁龙XR2平台,8GB存储,4K超高显示屏