FBEC2019 | 高通XR业务中国区负责人郭鹏:XR是下一代移动计算平台 ...
2019未来商业生态链接大会暨第四届金陀螺奖颁奖典礼(简称“FBEC2019”)由中国通信工业协会区块链专业委员会、中国通信工业协会虚拟现实专业委员会、广东省游戏产业协会、深圳市互联网文化市场协会指导,行业头部媒体游戏陀螺、VR陀螺、陀螺电竞、陀螺财经、深圳区块链技术与产业创新联盟联合主办,于2019年12月5日在深圳市南山区深圳湾1号T7座鹏瑞莱佛士酒店宴会厅盛大召开。本届大会以“蝶变 · 向上的力量”为主题,将一如既往的关注未来趋势发展、行业创新升级、商业生态新链接等前沿领域。
本次大会邀请到高通XR业务中国负责人郭鹏先生带来主题为“5G-加速实现XR世界”精彩分享,以下为演讲实录:
大家都知道,高通是产业链最上游的公司,我们的东西偏向底层和硬件,所以我今天的分享,相比于其他演讲者,会更多从XR底层技术和硬件方面向大家做一些简单的汇报。
5G、AI和XR的关系:相辅相成,互相呼应
高通成立30多年来,我们一直在引领着业界的创新;像最早的模拟通信到数字通信,从2G、3G、4G到现在的5G,从台式电脑到后面智能手机,就能办很多以前在电脑上可以办的事情。现在我们认为已经到了一个时间点,可以用我们目前已有的移动通信技术、智能手机技术扩展到边缘和万物连接上,XR就是在万物连接其中一个比较亮眼的一环。
刚才的嘉宾也讲了一些IDC和其他的数据,我们认为有两个数据是比较令人振奋的。首先是DIGI-Capital特的数据,他认为未来五年内可以高达800亿美元的价值。IDC2019年第二季度VR/AR头显季度跟踪报告也显示,从2019年600万的出货量可以增长到2023年6000万的量。XR是非常新兴的行业,但也是非常有前景的行业。
说到XR,不得不说关于XR和5G和AI的关系。5G和AI这这两年特别火的话题,我认为它们是相辅相成,相互呼应的关系。5G刚出来时,所有产业链的人都在想到底拿5G做什么,像3G、4G出来时我们守着2G,不知道3G、4G能够做什么。现在我们也在想这个问题,我们不知道未来几年5G能催生什么杀手级应用。
对于AI来讲,一样离不开XR。XR需要变得更加智能,不管是硬件、软件还是应用,都需要很强的AI能力,智能地分辨、感知,智能地做出人机交互的应用场景。我们认为5G、AI和XR是紧密联系在一起的,它给消费行业带来价值,给企业应用带来价值,有很多细分行业我不多赘述。
XR是下一代移动计算平台:解放双手,扩大视野
老调重谈一次,高通坚定地认为XR是下一代移动计算平台,像当年智能手机替换掉PC一样,我们认为未来XR是有机会替换掉手机的。
最直观的,我们现在能想到的和想不到的,现在只能说我们能想到的两点,最直观的优点,XR可以解放双手。为什么可以解放双手?智能手机操作模式是根据智能手机目前的形态让人类适应它的操作模式,我们用两个手指打字、触屏。这个UI的操作模式已经和之前看书、看报、用PC电脑、鼠标键盘发生了很大的变化。从手机到XR有更大的变革,它解放我们的双手,不再用手持着手机打字,用拇指做事情。我们可以用双手在视野范围内和虚拟的物体做一种真实的接触,同时不再需要只用一只拇指做输入输出,我们会用10个手指甚至手的一些细微动作,就可以做出XR交互性的事情,所以我们认为解放双方对于人类来说,是一个非常好的东西。
第二个,扩大视野。现在智能手机做到5寸、6寸是极限了,再往上做就是平板了。如果戴上XR眼镜,视野瞬间从20度、30度手机视野变成40度、50度大屏幕体验的视野,甚至当你的眼镜有三自由度定位、六自由度定位时,视野可以变成360度,甚至是6自由的360度,视野范围内都是屏幕,这相对于手机来讲,是非常大的变革。XR不仅需要底层硬件厂商、零部件厂商、显示光学厂商共同努力,同时还需要软件应用开发商一起打造这个产业。
AI与XR的关系:AI提升XR的体验
刚才已经说了很多AI的东西,对于XR来说,AI意味着提升了终端侧XR的体验,也意味着提升了云端、边缘端的XR体现。这里面AI有很多具体内容,包括对情境、环境的感知,语音的识别、语音的交互。因为那时候我们可能不再需要用打字输入,很多时候是通过语音跟XR设备做交互,包括基于定位的感知。头部定位、手柄或者手势定位、面部表情定位等所有定位是根据非常复杂的感知算法实现。多媒体,怎么让渲染变得更加智能化。VR上可以通过眼球追踪,让我们看到的地方是清晰的,余光范围是模糊的。在AR上,同样可以用眼球追踪,让我们想知道的东西凸显出来,而其他不关心的地方,依然是一个真实的物理世界。这是眼球跟踪和局部渲染在XR上的应用。渲染的真实性,对于光照的感知,让渲染跟真实物理世界变得更加真实,还有光照处理,都是AI在XR上的应用。
5G技术的成熟:高带宽、低延时
3G、4G基本到成熟或者顶峰,5G已经来了。5G最大的两个优势,高带宽、低延迟。这两个优势对于XR来讲都是100%契合的东西。可以将原来10-50兆的带宽提升到几百兆的带宽,可以让你有着更加丰富的多媒体应用,可能从目前到8K甚至更高,同时还可以支持带自由度的视频,可以身临其境的感受一场比赛,可以从场外走到场内,从场下走到场上,感受一场音乐会;这都是5G给你带来的东西。
而低延时给你带来云端渲染更加显著的效果。我们知道,基于算力的局限性和功耗限制的局限性,没有办法把终端侧的算力提升太高。因为现在电池技术还没有做到强大的突破,但我们可以把很多很多算力放到云端。而云端怎么把它的东西从云端快速传到本地,对本地的定位、操作做一些快速的反应,从云端再反应回来,这就需要一个特别特别快的管道,5G提供了这么一个完美的管道。我们认为5G的发展,对于云端的渲染、边缘云的应用场景,会是极大的促进。
XR的行业应用:企业领域和消费领域
XR正在变革企业领域。我们除了去发展很多很多消费类的设备、游戏、视频之外,也有很多合作伙伴去开拓企业级应用的市场,包括工业、教育、旅游、政府、安防、警用、政务,所有东西我们建成为行业应用。
在行业应用上,我提一下我们目前在做的项目,叫做XEP。这个项目旨在利用基于高通骁龙处理器,比如工业控制、智慧医疗、文化旅游的开发者,让他们把他们的软件基于底层SDK做更深度的优化。这样可以让软件和硬件工作得更加契合,能够打造更加优质的丰富体验,给到消费者或者行业应用客户。这是XR在企业级的变革,也是高通作为最上游的公司想为行业做的事情,希望通过这个把硬件给到开发者,让开发者把他的东西更好的优化,更好的提供给整个产业。
刚才提了行业应用,现在提一提基于消费类的产品。它是基于手机消费者场景。这个场景大概的意思是通过一个具有很强算力的手机,我们可以将一个特别简单的VR或AR眼镜连接到手机上,有很多算力从眼镜侧挪到手机侧。而手机需要做的是比较高端的CPU,比如骁龙855或者865,需要有一些显示的接口和基于头部定位的一些算法。而眼镜侧就不需要一个主镜片,可以把它的摄像头、显示等工作量从眼镜挪到手机。这个好处是手机是目前人人都有的东西,保有量非常大。眼镜作为一个附件,可以提升你的视野,可以给你带来更沉浸的感受。这是目前手机再往前扩展一步一个新的方向。
我们也同样把连接手机的头显计划扩展到HAP(硬件加速器计划)里。我们以前在一体机范畴里寻找合作伙伴,比如屏幕厂商、摄像头厂商、底层算法厂商。现在我们会把这个计划拓展至XR头显,连手机的头显,我们也跟业内一些优秀合作伙伴签订了协议,让他的眼镜基于高通骁龙高端芯片智能手机上连接起来更加稳定、自然。
XR的兼容性:串流PC和边缘云
最后是关于移动XR和PC,XR的兼容性。我们有串流技术,可以将渲染的工作量从眼镜侧、手机侧挪到PC侧,甚至通过5G挪到边缘云。因为PC和边缘云算力非常强大,不计功耗,显示的渲染细腻程度非常好,渲染好之后可以通过高速WIFI或者5G传到头显做呈现。头显还做AI感知的东西,比如眼球跟踪定位、手势控制器定位,通过本地端和PC或者云端共同工作相互结合的特点,可以使得目前XR设备基于目前特别轻便、简单的移动设备,保证特别高的移动性的同时,还能享受到特别高的画质,PC级的。这是我们在XR移动侧和PC或者云端侧所做的一些事情。我们最新的骁龙845甚至骁龙新发的865,都能支持这个串流技术。
这是一个简单的XR头显和边缘云交互的过程,可以通过5G高速带宽、超低延迟实现分布式智能的效果。
高通与XR行业
大家都知道,高通在最上游,我们提供的是芯片和底层的技术、底层的算法,我们也研发了一些先进的算法。比如最基本的六自由度算法,还和很多优秀合作伙伴把眼球跟踪、手势识别算法集成起来,所有的算法都能跑在芯片里,跑在硬件侧。它是一个特别特别高效的算法,高性能、低功耗。同时我们会把业界合作伙伴都结合到一起,把硬件屏幕显示的、光学的、做底层技术的、算法的厂商结合,有一个HAP计划。同时结合开发者有一个XEP计划,把开发者集合起来,在目前已有的硬件设备商做优化,最后我们推出给客户的,除了刚才说的上层软件整体解决方案之外,最显著的是现在已有的已经上市的设备。在这个图上可以看到(见PPT),已经有至少16款设备在市面上销售,其中包括VR、AR、分体机、一体机,也有接手机的VR或者AR。
到目前为止我们已经有超过30款XR设备量产或者上市,正在研发中的也有超过二三十款产品。我们可以比较自豪的说,整个XR的半壁江山,硬件这块基本都是基于高通芯片做的。确实,芯片的能力、功耗、整体性能,在业界是比较优秀的。
另外是我们的商业模式,从最上游把产品推广到硬件合作伙伴,有OEM品牌厂商、ODM方案制造商,再把软件平台供应商的软件、平台整合起来,把上层应用也整合起来。同时还跟运营商,比如韩国运营商、国内运营商、日本运营商一起做一些合作,把它的5G和我们的设备连接起来,打造更优秀的一些应用,最终我们的产品普惠到消费者或者行业应用领域。
我今天的分享就这些,可能在座有些人比较感兴趣的话题是我们的新产品。因为这两天大家都知道,如果关注媒体,可以看到我们的芯片发布会正在夏威夷进行,而且还没有结束。很多媒体已经问过我,说我今天会讲什么。今天我还不能讲什么,因为还需要有一天时间我们的PR才能出来。如果大家有兴趣关注一下我们的官网或者媒体文章,应该能发现在接下来几天内我们会有更多动作,尤其是在XR上,会有更新的产品推向市场,给市场持续注入新鲜的活力!