随着VR和AR技术快速发展,产品不断成熟,体验也变得越来越优秀。据悉,Meta Quest系列VR头显出货量超2000万台,基本证明了VR开始在消费类电子产品中占据一席之地。与此同时,近两年AR眼镜也在逐渐升温,成为了创业公司、开发者都在关注的新方向之一。
众所周知,任何一个硬件平台的崛起都离不开广大的开发者生态和内容体系,因此在XR发展早期,能够为开发者打造一套好用、易用的开发工具,提供良好的开发者支持服务,是一件非常有必要、且意义重大的事。
除了大家熟知的XR专用芯片外,高通在多个领域都积极布局。内容生态方面,面向全球开发者推出XR专用开发者平台:Snapdragon Spaces。本周高通宣布和神木科技合作,共同为中国市场的XR开发者提供丰富的本地化服务和技术支持,进一步推动国内XR生态发展,目的就是促进更多优质本土XR内容的诞生。
在详细了解这次合作以及带来的新机遇之前,我们有必要先来回顾一下当前AR眼镜内容开发的难点,以及Snapdragon Spaces开发者平台在这方面做出的努力。
Snapdragon Spaces的重要性
在XR技术方向上,高通已经持续投入研发超过10年,作为上游方案商不仅布局XR专用芯片、XR硬件参考设计、XR软件和算法,同时也看到了内容对XR体验的重要性,坚定的推出Snapdragon Spaces开发者平台,目的就是在AR眼镜发展初期,从开发者和内容生态建设等多方位推动XR行业发展。
很多朋友不太清楚Snapdragon Spaces平台对开发者带来的变化。此前,开发者需使用各个AR/VR硬件厂商提供的开发工具包,在这些工具中整合了高通的SDK和软件。也就是说,高通主要面向OEM/ODM厂商提供开发工具,不涉及具体的开发者层面。
而现在,高通则是前所未有的直接参与到开发者推动工作中来,将核心感知算法和软件以API形式提供给XR开发者,省去了OEM厂商工具包的“中间环节”,正是这样的一个变化,为开发者提供了更多便利。
当前AR眼镜内容生态建设面临着一些挑战,例如:生态碎片化,各个AR硬件厂商有自己的开发工具,各平台之间不通用;开发效率低,跨平台开发需单独适配,重复劳动且拉长开发周期;OEM工具包新特性迭代慢等。
而Snapdragon Spaces专门针对这些问题提供了对应解决方案,打通开发道路上的阻碍,为XR开发者提供众多支持。具体来说,Snapdragon Spaces平台特性如下:
- 基于OpenXR 规范,支持Unreal和Unity主流开发引擎,保持开放性。只需一次开发,即可适配多平台,效率更高;
- 融合高通空间感知和交互算法与技术创新,如高通在XR技术上支持本地锚点和持久性,物体识别和追踪,空间映射和空间网格,手势追踪等技术,为今后更沉浸、更庞大的XR体验提供良好基础;
- 开发者优先,直接面向开发者提供服务和支持,同时基于Snapdragon Spaces探路者计划等向开发者提供项目资助、硬件开发套件、市场宣传推广等支持。
高通技术公司副总裁兼XR业务总经理 司宏国
高通技术公司副总裁兼XR业务总经理 司宏国(Hugo Swart)表示:“自2022年6月份在全球范围开放下载以来,Snapdragon Spaces已吸引了数以千计的开发者加入进来”。同时高通也在有序推动Snapdragon Spaces Ready认证,包括联想ThinkReality A3智能眼镜、联想ThinkReality VRX、小米无线AR眼镜探索版,一加11 5G智能手机等多款设备已获认证,意味着这些设备可以直接利用Snapdragon Spaces的最新特性。
AR眼镜和智能手机将是好搭档
很多人也在关心AR眼镜未来和智能手机会是什么样的关系,是共存还是取代?在高通看来,理想的AR眼镜使用环境需与智能手机配合使用,尤其是未来更轻量化的AR眼镜方向上,智能手机承担了更多算力方面的工作,两者会是一个非常好的搭档。
司宏国对此表示:“目前XR眼镜的散热和续航能力有限,因此需要分布式的计算架构,和手机、PC等终端之间分配计算任务。其他终端可能不会完全被XR眼镜取代,而是从用户的主要屏幕转变为次要屏幕,成为拥有强大处理能力的计算中枢。”
这一点我们从高通XR参考设计上也能看出,最新三代AR眼镜参考设计(骁龙XR1 AR眼镜参考设计、骁龙XR2无线AR眼镜参考设计和骁龙AR2无线AR眼镜参考设计)都朝着分体式方向发展,且最新两款都改为无线化连接方案。尤其是骁龙AR2平台结合了分布式芯片架构和分离式渲染方案,给未来轻量化AR眼镜提供坚实基础。
与此同时,Snapdragon Spaces也不局限于AR眼镜方向,现已扩展至VR和MR头显领域。尤其是当下VST透视方案热度高涨,很多品牌都在积极筹备VST新品, OPPO已经确认将推出支持Snapdragon Spaces Ready认证的MR头显。在AR/VR/MR内容建设上,Snapdragon Spaces都将发挥重要推动作用。
不仅仅是智能手机厂商,众多运营商也在积极探索XR业务方向。在MWC2023期间,高通与七家运营商就Snapdragon Spaces展开合作,这其中就包括国内运营商中国移动。
助力国内开发者,壮大XR内容生态
在此之前,高通在中国已经进行过很多XR业务探索和尝试,例如与中国移动合作进行“业内首次基于5G切片的端边协同分离渲染无界XR技术演示”,与中赫集团推动5G无界XR赛事体验方案在新工体落地等。
左:高通技术公司副总裁兼XR业务总经理 司宏国,右:神木科技CEO李薇
而这次和与神木科技合作,又会带来哪些变化和机会呢?神木科技CEO李薇讲到:“神木科技将充分利用业经认证的骁龙XR技术和平台,结合神木科技自身的技术优势以及开发者社区建设经验,为中国XR开发者提供完善的支持与服务,使其可以开发更具创意的内容,并最终让XR产品的用户感受到从移动互联网升维至空间互联网的非凡魅力,助力中国XR行业实现蓬勃发展。”
具体来讲,本次合作主要体现在以下方面:
- 提供本地化的技术支持,包括面向Unity和虚幻引擎等主流3D引擎的SDK,以及与Snapdragon Spaces软件平台和接口适配及集成的工具及技术支持
- 打造官方中文开发者社区,提供包括视频、文档、案例参考以及线上线下培训,Snapdragon Spaces社区工具预计将于2023年夏季推出;
- 在Snapdragon Spaces上增加更具本土化特色的能力和特性;
- 提供Snapdragon Spaces开发者套件中硬件的申请和交付,Snapdragon Spaces开发者套件预计2023年夏季在中国市场推出;
- 运营和管理XR内容分发平台,帮助创作者打通商业化路径。
除了技术上的支持外,还提供了更多开发者交流机会。据悉,高通将联合神木科技在多个城市推出开发者沙龙,在这里不仅能够分享和了解到更前沿的Snapdragon Spaces开发案例,也为XR内容创作提供了一个思想碰撞的交流平台。
重点要提的是,面对即将到来的未来空间计算时代,高通还设立了1亿美元骁龙元宇宙基金,目的就是为有想法、有创意的XR开发者和打造核心AR、AI技术的创新企业提供资金帮助,助力打造更丰富的XR内容体验。作为与高通共同推动国内XR生态的合作伙伴,神木科技也已获得高通创投的投资。
而本次合作的最终目标是推动国内AR眼镜生态壮大和繁荣,同时对AR眼镜普及也有重要意义。正如司宏国所讲:“面对AR眼镜技术上的挑战,高通的优势是能够打造集成高性能、低功耗以及强大连接能力的解决方案,同时携手广大合作伙伴打造强大的生态系统,共同解决这些问题,以此来推动AR眼镜的普及。”