自2012年Oculus Rift问世开始,国内XR(AR、VR、MR等多种技术统称,即扩展现实)行业经历了2016年的所谓VR元年,熬过2017年开始的冰河期,再到2021年年底开启的元宇宙热潮,在起起伏伏间逐步走向了成熟。
一位长期关注XR的投资人告诉界面新闻,之前XR无法被称为一个产业,一个重要原因在于没有自己的产业链,而是与智能手机等产业共用产业链,但现在这种情况正在逐渐改变。高清晰度的显示屏、精准的传感器以及强大的集成电路计算能力,都为XR体验提供了坚实的技术基础。
与智能手机的发展历程类似,作为XR设备的核心组成部分,XR芯片的性能直接与用户体验挂钩,得到了多方主体的关注。头部科技企业中如Apple、三星、Meta都曾在XR自研芯片上做出尝试,在今年8月备受关注的Apple vision pro中就搭载了Apple R1专用芯片。
回望国内,XR芯片领域同样不乏参与者,成立于2021年9月的万有引力正是其中之一。作为一家XR空间计算芯片设计公司,万有引力聚焦于XR设备专用芯片及相关组件研发的公司,以核心芯片为载体,硬件技术和算法作为支撑提供下一代XR空间计算的完整技术解决方案。
在衡量企业价值方面,头部风投机构们向来敏锐。在成立至今的2年多的时间里,万有引力已经完成了包含天使轮、Pre-A轮、Pre-A+轮、A轮的四轮融资,天使轮后每轮融资额均在亿元人民币级别,资方阵容中更是不乏红杉资本、IDG资本、众源资本等头部风投机构。
XR芯片为什么必不可少?
众所周知,VR设备旨在为用户提供一个交互式的虚拟三维空间,而See-Through功能(即利用设备的前置摄像头查看头显外部实时环境情况的功能,也被称为“透视功能”)则是为了打破虚拟空间,让用户对周围的真实世界有所感知。
这项原本出自安全考虑的功能随着行业的发展却衍生出了更多可能性。Meta、微软等企业都选择借由See-Through功能在自身VR产品上增加更多AR向应用以提升设备实用价值。
目前实现See-Through功能的技术路线主要包含VST(视频透视Video See-Through)、OST(光学透视Optical See-Through)。Apple vision pro通过Eye Sight的功能链接虚拟与现实,其背后的思路正是VST路线。
基于VST路线的XR设备通常配备有多个传感器,这就意味着其芯片需要满足高度计算密集型的应用需求,能够处理大量的图像和数据,提供更加流畅和逼真的虚拟现实和增强现实体验。
另一方面,当身体运动和视觉反馈之间出现延迟时,这种滞后可能会导致用户眩晕,因此XR设备要有无延迟或低延迟处理的能力,以确保用户可以更加自然、舒适地与虚拟环境进行交互。
在行业伊始,VR一体机中普遍采用高通推出的骁龙XR2芯片,但是这款芯片是在智能手机芯片的基础上调整得来的,并不能完全满足XR设备对于交互和显示的特殊需求。
“高清、低延迟、无眩晕的视频穿透(VST)体验是让空间计算从游戏主机进入办公和更普遍的消费市场的关键,而让这成为可能的是专用协处理器芯片。”砺思资本创始合伙人曹曦曾公开表示,“这颗芯片不仅需要完成传感器的数据融合,同时也要对传感器数据进行AI处理,配合主控芯片达到虚实结合和以假乱真的效果。”
Apple vision pro中所搭载的Apple R1芯片正是一款专用协处理器芯片,专门用于处理从Apple Vision Pro的各种传感器获得的数据,与主处理器M2芯片协同工作。传感器将其感测到的内容转换为数字数据输入,Apple R1芯片接收输入数据并进行实时处理,随后输出生成混合现实环境所需要的数据。
可以说更快速、更高质量处理传感器数据是XR设备向用户呈现混合现实环境的基础,无论是对于交互还是显示,专用协处理器芯片的重要性都不言而喻。
专业团队下场
与科技巨头相比,创业公司的优势就在于快速迭代、颠覆性开发的能力。找好细分领域切入、迅速发力至关重要。
随着XR技术在社交娱乐、生产生活、工业制造、医疗保健、教育培训等领域的应用越来越广泛,对高性能XR芯片的需求将持续增长。在第三方XR专用芯片研发商相对稀缺的2021年,专业团队选择下场创业。
公开报道显示,万有引力CEO在斯坦福攻读电子工程博士之后加入苹果,期间在XR方向上积累了丰富研发经验;其余联创则分别来自苹果、华为、Meta、Amazon,各自的专业领域包含XR芯片、显示、光学、感知、算法等等。
万有引力所推出的第一款产品正是力求带来极致体验的一款XR专用芯片——GravityXR™️ 仿生视觉芯片。据介绍,这款芯片在显示、感知、图像等多方面具备硬件加速处理的定制化设计,提供多传感器接口以及与之对应的感知、图像算法应用以及高分辨/高帧率的显示接口、与之对应的显示效果增强技术。
能力方面,这款芯片更智能地达到8K/120Hz;实现比AR更强的MR应用,达到舒适,无眩晕;增强VR/MR的画质效果:高质量的显示/光学增强和相机处理;为感知技术提供足够的灵活性和计算能力。
从整个产业来看,XR设备正在向下一代交互工具稳步迭代。IDC统计数据显示,VR\AR全球消费支出在2022年为139亿美元,并预计将在2026年增长至509亿美元,未来四年的全球市场规模年复合增长率为32.3%。
长期来看,当XR设备从小众游戏机、维修检测等小场景产品迭代为手机一样的大众设备,XR芯片领域毫无疑问将出现新的伟大公司。但是在当前这一阶段,初创芯片厂商还需要为长期投入储备弹药。
由于半导体行业本身具备研发成本高、投入周期长的特点,初创芯片厂商必然要面对现金流的压力。从芯片设计到流片、再到面向市场产生订单,能否把握合适的商业化节奏至关重要。
据了解在芯片流片之前,万有引力与业界主要厂商合作开发了系统级测试平台,这一合作使得他们能够提前验证芯片的算法及架构、展示部分芯片功能的整合以及实时VST效果,这将会有利于提升流片的成功率。
此前在36氪的报道中,万有引力创始团队曾预计第一代芯片将于2024年内完成量产,并表示团队已经开始跟诸多产业头部玩家接触,并且与部分玩家达成战略研发合作。
在披露Pre-A+轮融资时,万有引力曾表示下一轮融资所得资金将部分用于流片生产和下一代芯片的研发。这意味着万有引力正保持着长期投入的心态、稳步走向产品迭代的节奏上。
“虚拟现实是一个值得长期去做的方向,”万有引力CEO曾这样说,“我们和投资人都有信心,在这个硬科技的领域扎根,进行长期投入。”
来源:界面新闻 作者:陈显