【XR】One More Thing:Vision Pro ,7年磨一剑,2023WWDC苹果发布Vision MR

news2024/11/26 4:22:48

One More Thing:Vision Pro ,7年磨一剑,2023WWDC苹果发布Vision MR

      • 1. 苹果MR Vision Pro:
        • 1. 专利布局:苹果表示在开发过程中申请了5000多项专利。
        • 2. 专属感知计算芯片
        • 3. 显示屏系统方面
        • 4. 续航方面
        • 5. Vision MR 的新框架
        • 6. VST
        • 7.交互方式(眼动交互+手势)
        • 8.summary
      • 2. PMF(Product Market Fit)番外

在这里插入图片描述

1. 苹果MR Vision Pro:

Vision Pro 的发布,可以算是苹果公司自 2015 年 Apple Watch 首次亮相以来最大的硬件产品发布,或许它会彻底改变数百万人与电脑和周围世界的互动方式。

”苹果 CEO Tim Cook 表示,“Mac 带来了个人计算,iPhone 带来了移动计算,而 Apple Vision Pro 为我们带来了空间计算。”
这个名为 Vision Pro 的 MR 头显终于登场:无论是售价为 $2899,还是酷似滑雪镜的外观设计、数字表冠设计,都已经与之前的曝光相符合。苹果的产品设计和工业设计真的很强。
在这里插入图片描述

1. 专利布局:苹果表示在开发过程中申请了5000多项专利。

2. 专属感知计算芯片

在底层芯片方面,Vision Pro搭载自研的M2芯片和R1芯片,其中全新R1芯片主要负责传输包括12个摄像头、5个传感器(dtof 结构光 4个cam)和6个麦克风的信息,以应对传感器和显示屏之间延迟带来的体验不适。Vision MR将为保持图像处理速度和精度方面提供新的解决方案,使苹果设备支持更快、更精确的AR/VR体验(R1芯片的研发,用于支持x个cam,6个声音采集传感器,深度传感器等的数据同步,专门用来处理数据延迟这一痛点,这个在实际的研发过程中,真的非常重要且棘手,如果可以有一个方案彻底的从低层解决这一问题,必然会成为主流方案的发展方向)。Vision Pro 搭载了 Apple M2 芯片,此外还有负责视频流的最新 R1 芯片,该芯片会处理来自摄像头、传感器和麦克风的输入。R1 芯片能够在 12 毫秒内将新图像传输到显示器,比眨眼快 8 倍,这意味着几乎消除了延迟。
在这里插入图片描述

3. 显示屏系统方面

Vision Pro使用的是microOLED,两块面板一共2300万像素每个眼镜分到的像素比4K电视还多。OS方面,苹果推出全新的VisionOS,支持空间计算和低延时,这也是苹果首款彻底为空间计算打造的操作系统。

4. 续航方面

采用分离式电池设计,外部电池可提供2小时续航。身份识别方面,Vision Pro基于虹膜的独特性,采用了optic ID安全系统,和faceID类似可以进行密码填充、购物等操作。

5. Vision MR 的新框架

苹果在WWDC 2023上推出了名为**"Vision MR"的新框架**,旨在改进增强现实和虚拟现实应用程序(这是生态方面,当前阶段苹果明显处于落后阶段,所以他们也是非常重视和关注这一点),开发者可以利用Vision MR框架,构建更丰富、更创新的AR/VR应用程序.对于游戏开发者而言,Vision MR将带来更加自由、创意性的体验,苹果公司还将推出一系列Vision MR开发工具,并为开发者提供支持;Vision MR框架将与Core ML紧密结合,以改进机器学习应用程序性能;Vision MR框架将支持使用iPhone 12 Pro、iPad Pro等苹果设备; Vision MR还将在医疗保健和教育领域方面提供重要进展(比较重视的领域,这可能与老大哥HoloLens的经验有关系);Vision MR将为智能家居和自动化技术带来更好的控制和管理能力。运用Vision MR的游戏,将带来更多虚拟现实中的互动和娱乐体验,让玩家深入沉浸其间。Vision MR将提供更快速的搜索和导航功能,例如地图和旅游应用程序。 新框架将支持更多的语音交互方式,例如Siri和语音助手。Vision MR还将提供更好的视觉辅助功能,例如文字识别和翻译。这一框架包含了很多XR的硬性条件。
这里包含大量的感知与三D重建的技术,这块可以说是做到了极致的体验。
巴拉巴拉说了这么多,没有一个准信,没有找到应用场景的突破口,美其名曰说是学习iwatch的成长方式,一边研发,一边找场景定位。

这里apple 作了一些应用尝试:更加的符合直觉和认知。
FaceTime人物3D效果

苹果Vision Pro的FaceTime通话交流并不是平面2D,而是立体3D化。在目前主流的AR/VR远程协作交流中,非AR/VR终端用户在AR/VR环境都是平面2D效果。立体3D化的AR/VR环境交流显然更具有沉浸感。
在这里插入图片描述

6. VST

比较惊艳的一点是VST可以双向显示,这样MR更加的适用,在与人沟通的时候不用摘下,别人也可以看到你的面部表情。
在这里插入图片描述

7.交互方式(眼动交互+手势)

另一个比较惊艳的技术是交互方式,这块apple是坚持自然交互的,但是存在反馈问题这块,好像也没有很好的展示,这是基于自然交互的短板。但是三维交互有着天然优势,十分符合人类直觉。

8.summary

这里可以直观感知到的就是apple把 slam 三维重建 人脸重建 虚拟人物重建 手势识别 眼球追踪 不知道有没有语义感知层面的算法 整合到了一起;一圈传感器中有很多高功耗的类型,散热结构和材料的等均衡;还有就是这些数据的同步与算力的完全支持,这样看下来真的是🐮。

  1. 还有哪些欢迎大佬们补充讨论!

2. PMF(Product Market Fit)番外

这里想到做产品的同学会经常提到一个词,叫PMF(Product Market Fit),讲的是我们做的产品只有在验证了它的市场契合度的基础上才能够扩大销售生产,而在此之前,任何扩大销售和推广都是不应该的,而PMF就是这中间的衡量标准。
找到PMF很难,但放在一个较长的时间维度下,比如十年,我相信天才的产品经理和工程师是可以找到的。
但是当我们已经有了天才的产品经理和工程师,还是找不到PMF,这是为什么呢?
这里我想提出一个新概念,叫TMF (Technology Market Fit)。放在更长的历史维度下,M其实一直都在,但如果T不够ready,即使有天才的产品经理和工程师,也无法完成F,因此规划中的P也不会出现。而每一个时代天才的产品经理和工程师的使命是:利用当时的T,完成F,形成伟大的P,所以一个时代的P=TMF。
XR行业之所以难,难就难在T(Technology)不 ready,而T不是天才产品经理和工程师可以解决的,大家都在期盼这个转折点的到来。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/616165.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

MATLAB安装配置MinGW-w64 C++编译器

文章目录 前言一、Mingw安装1、安装教程2、验证 二、MATLAB安装配置MinGW总结 #pic_center 前言 只是为方便学习,不做其他用途 一、Mingw安装 在网上找到的安装一直报错:The file has been downloaded incorrectly 1、安装教程 建议参考博客Mingw快捷安…

C++内存序、屏障和原子操作

文章目录 一、原子类型二、原子操作函数三、内存序1&#xff09;happens-before和synchronizes-with语义2&#xff09;内存序模式 四、标准库函数五、栅栏&#xff08;Barrier&#xff09; 一、原子类型 标准原子类型的备选名和与其相关的 std::atomic<> 特化类&#xf…

探索低代码的新形态(D2C、ChatGPT)

前言 低代码平台的出现&#xff0c;是互联网快速发展的背景下&#xff0c;满足产品快速迭代的实际需求。现在国内外都已经拥有非常多优秀的开源项目&#xff08;如&#xff1a;lowcode-engine&#xff09;和成熟的商业产品&#xff08;如&#xff1a;Mendix 、PowerPlatform&a…

Orillusion次时代 WebGPU 引擎

Orillusion 次时代 WebGPU 引擎 官网: https://www.orillusion.com/ 教程: https://www.orillusion.com/guide/ Orillusion 引擎是一款完全支持 WebGPU 标准的轻量级渲染引擎。基于最新的 Web 图形API标准&#xff0c;我们做了大量的探索和尝试&#xff0c;实现了很多曾经在 We…

python接口自动化(三)--如何设计接口测试用例(详解)

在开始接口测试之前&#xff0c;我们来想一下&#xff0c;如何进行接口测试的准备工作。或者说&#xff0c;接口测试的流程是什么&#xff1f;有些人就很好奇&#xff0c;接口测试要流程干嘛&#xff1f;不就是拿着接口文档直接利用接口 测试工具测试嘛。其实&#xff0c;如果…

【正点原子STM32连载】 第二十八章 低功耗实验摘自【正点原子】STM32F103 战舰开发指南V1.2

1&#xff09;实验平台&#xff1a;正点原子stm32f103战舰开发板V4 2&#xff09;平台购买地址&#xff1a;https://detail.tmall.com/item.htm?id609294757420 3&#xff09;全套实验源码手册视频下载地址&#xff1a; http://www.openedv.com/thread-340252-1-1.html 第二十…

计算机中数据的表示:定点数、浮点数

文章目录 1 概述2 定点数2.1 表示方法2.2 取值范围2.3 运算方法 3 浮点数3.1 表示方法3.2 运算方法 4 扩展4.1 等比数列前 n 项和公式 1 概述 #mermaid-svg-EXDrkn8G91FsDdps {font-family:"trebuchet ms",verdana,arial,sans-serif;font-size:16px;fill:#333;}#merm…

给 a 标签设置 display:inline-block 之后 a 整体下沉

今天给一个a设置宽高&#xff0c;前提是添加了display:inline-block&#xff1b;然后发下a没有与父元素div顶部对齐&#xff0c;反而下沉了。试了好多办法都没成功&#xff0c;然后在网上找的教程。 原因 1、问题就是出在了display:inline-block;语句上&#xff0c;行内块元…

使用Python进行接口性能测试:从入门到高级

前言&#xff1a; 在今天的网络世界中&#xff0c;接口性能测试越来越重要。良好的接口性能可以确保我们的应用程序可以在各种网络条件下&#xff0c;保持流畅、稳定和高效。Python&#xff0c;作为一种广泛使用的编程语言&#xff0c;为进行接口性能测试提供了强大而灵活的工…

Redis:数据类型

一、Redis字符串(String) 1、String类型 String字符串&#xff1a;string类型是redis最基本、最简单的数据类型&#xff0c;一个key对应一个value。 String类型的二进制是安全的&#xff0c;可以包含任何数据&#xff0c;但是每一个value最大时512M 2、String命令 设置和获…

《人月神话》译文修订明细(6)-读者可以对照修改

《人月神话》译文修订明细&#xff08;1&#xff09;-读者可以对照修改 《人月神话》译文修订明细&#xff08;2&#xff09;-读者可以对照修改 《人月神话》译文修订明细&#xff08;3&#xff09;-读者可以对照修改 《人月神话》译文修订明细&#xff08;4&#xff09;-读…

前端面试题整理14

目录 1.什么是同步&#xff1f;什么是异步&#xff1f; 2.localStorage、sessionStorage和cookie的区别&#xff1f; 3.Vue中key的作用是什么&#xff1f; 4.支付流程是什么&#xff1f; 5.Vuex的模块化是如何做的&#xff1f; 6.Vite和webpack的不同&#xff1f;Vite的优…

BS LIS系统仪器数据采集方法

BS LIS系统仪器数据采集方法 BS LIS系统对检验仪器的数据采集主要通过串行口通讯、USB端口通讯、TCP/IP通讯、定时监控数据库和手工录入等几种方法。串行口通讯最为普遍&#xff0c;采用RS-232C标准&#xff0c;一般的仪器都支持此标准。定时监控数据库对仪器管理机上已有的检…

【Vue】Element Plus和Element UI中插槽使用

文章目录 前言一、两者的区别二、组件库三、具体讲解总结 前言 今天和大家讲一下Element Plus和Element UI这两个组件库中表格的插槽使用方法&#xff0c;一般情况下vue2使用Element UI这个组件库&#xff0c;表格组件的插槽的话一般都是使用v-slot&#xff0c;而vue3使用Elem…

如何进行有效的移动应用测试?10个步骤带你一战成神

移动应用的市场日益壮大&#xff0c;而随着这个市场的发展&#xff0c;如何有效地测试移动应用也成为了一个重要的问题。本文将为你提供一些关于如何进行有效的移动应用测试的建议&#xff0c;并提供一些实际测试例子。 1. 理解你的用户和使用场景 在进行移动应用测试之前&…

rror updating database. Cause: java.sql.SQLSyntaxErrorException解决方案

错误描述&#xff1a; ### Error updating database. Cause: java.sql.SQLSyntaxErrorException: You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near CONDITION 1 这里是因为字段名…

Linux多线程认识

目录 &#x1f427;一、什么是线程 1.1虚拟地址如何转换成物理地址 1.2多线程 1.3Linux进程vs线程 1.4从Linux内核和CPU的角度看线程 &#x1f427;二、Linux线程控制 2.1POSIX线程库 2.2线程异常 2.3线程终止 ①exit不可以用来终止线程 ②pthread_exit() ③pthread…

Revit干货|自动捕捉遇到困难?这份秘诀请收好!

在BIM行业里&#xff0c;Revit往往影响着我们的建模效率&#xff0c;尽管软件提供了许多功能&#xff0c;但在建模过程中还是会因繁琐的操作而浪费很多时间。 因此&#xff0c;在使用Revit建模时&#xff0c;我们需要掌握一些小技巧来提升效率&#xff0c;如快捷键的使用和工具…

早餐配送APP小程序开发 轻轻一点搞定营养早餐

早餐是一日三餐中最重要的一餐&#xff0c;需要营养添加。但是现在多数的年轻人因为快节奏的生活工作二忽视了早餐的重要性&#xff0c;没有时间做就对付几口很多人甚至不吃早餐。早餐预定配送APP小程序开发解决了上班族的早餐问题&#xff0c;不用排队到早餐店去挤着买豆浆油条…

Langchain学习笔记

Langchain学习笔记 1.环境2. 1.环境 1.创建虚拟环境,名叫langchain conda create -n langchain python conda activate langcahin pip install langchain pip install openai -i https://pypi.tuna.tsinghua.edu.cn/simple2.在jupyter中使用这个虚拟环境。 conda activate l…