搜维尔科技:Varjo XR-4 功能详解:实现业界首个凝视驱动自动对焦系统

news2025/1/10 21:06:39

对可变焦光学元件的需求

目前,所有其他XR HMD都在视频直通摄像头中使用定焦光学元件,其焦距无法改变。人眼可以辨别高达约 60 像素/度 ( PPD ) 的细节,但定焦光学元件的问题在于,在实践中,它们的分辨率极限约为 30 PPD。

这是因为需要进行平衡:一方面,镜头光圈需要足够小,以使景深 ( DoF ) 覆盖目标 PPD 的整个操作范围(例如从 20 厘米到无穷远)。另一方面,光圈不能太小,因为一定量的光需要到达传感器,图像处理器才能生成无噪声的高质量图像。我们也非常接近衍射极限,以至于减小光圈实际上会降低有效分辨率。曝光时间也不能太长,因为 XR HMD 需要高速摄像机(至少 90Hz),例如在快节奏的训练场景中,曝光时间必须降低到 1/90 秒以下,以减少运动模糊。

出于类似的原因,手机早已从定焦相机过渡到变焦相机。事实上,即使是人眼也使用变焦光学元件。Varjo 是第一家将变焦相机直通系统引入 XR 市场的公司。

图片

实现业界首个凝视驱动自动对焦系统

变焦相机以牺牲景深为代价来优化 PPD 和到达传感器的光量,每次只能对焦一小段距离。现在的问题是:我们如何在正确的距离对焦,以及如何足够快地对焦?

您可能熟悉手机对焦的方式:您点击屏幕上的某个物体,相机会评估不同的对焦距离,并选择提取该物体最高频率的距离。这对于 XR HMD 来说还不够好。

XR-4 Focal Edition 具有精心校准的光学元件、非常快的对焦执行器(从一端到另一端不到一毫秒)——但最重要的是,我们开发了一种模仿人眼的新型自动对焦系统。

图片

它的工作原理是以200Hz 的频率跟踪您的视线,并与我们先进的LiDAR深度传感器配合使用,以比人眼本身更快的速度稳定在正确的焦距上。最终结果非常自然:无论您看向何处,您都会看到清晰的图像,并且对焦速度非常快,以至于您永远不会看到它发生变化。就好像您一开始就没有通过相机看一样。

我们的系统可以通过选择与凝视距离相关的凝视位置周围的 LiDAR 深度样本来消除诸如注视手指或手指之间的困难情况。人们可能会担心注视点之外的物体可能没有聚焦。人眼的分辨率不足以注意到中央凹之外的物体,而且由于 XR-4 Focal Edition 的光圈大小与典型虹膜大致相同,因此这一点也与人眼一样。

图片

关键任务工作的主要优势

但是从 30PPD 到 50PPD 有多大关系呢?我必须承认,我最初并没有意识到在视频传输中达到人眼分辨率比在 VR 中更重要。事后看来,这是显而易见的,但令我惊讶的是,我周围的物理世界中几乎所有东西都是为人类视觉系统的分辨率而设计的,无论是我最喜欢的杂志上的字体大小、我的电脑显示器上的分辨率,还是我键盘上的字母大小。使用除 XR-4 Focal Edition 之外的任何其他 HMD,一切都令人沮丧地无法阅读。

,时长00:07

如果您在 XR 中达不到人眼的分辨率,它会迫使您将所看的东西靠近眼睛,从而有效地改变您的自然行为。这在许多用例中是不可接受的,但在高级训练中尤其如此。您训练时使用的仪器已针对人眼进行了精心优化,并且您的头部处于特定位置是有原因的。您无法训练飞行员伸手去读取仪器,因为这不是您在实际情况中会做的事情。幸运的是,Varjo XR-4 Focal Edition 可以像您的眼睛一样看世界。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2045749.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

ESP8266与阿里云物联网平台连接

前言 最近折腾项目,需要用到ESP8266模块对接阿里云物联网平台,网上感觉十分完善的教程少了一点点,比较折腾我哈哈哈,所以打算自己写一篇。 材料准备 1、ESP8266 WiFi模块 数据线 网上随便买一个就好,十块钱左右一个…

BERT:BidirectionalEncoderRepresentations fromTransformers代码及数据解读

论文地址 写在前面 由于官网给的是TensorFlow版本的,github也有pytorch版本,但是给出的pytorch的代码是需要根据实际情况进行修改的。 词表文件vocab.txt文件读取的问题 vocab.py代码的class WordVocab(Vocab)类中的def load_vocab(vocab_path)函数为…

看看人家都用树莓派5做了什么产品?

文章作者: Aleksandar Dakić 原文地址: https://magazinmehatronika.com/edatec-ed-hmi3020-070c-hmi-recenzija/ Aleksandar Dakić《机电一体化》的杂志主编,同时Aleksandar 也是《机电一体化》杂志的创始人。拥有电气工程背景&#x…

MySQL的安装及配置远程链接(WindowsLinux下安装)

一.Windows下安装 在Windows下安装MySQL需要先去官网下载一下安装包 1. 官网下载地址:www.mysql.com 2、选择下载 往下滑选择MySQL 社区 (GPL) 下载 3、选择社区版适配Windows系统 MySQL Installer for Windows 4、选择本地安装版本 my…

十五年以来 — 战略性云平台服务的演进路径之全面呈现(含亚马逊、微软和谷歌)

Gartner每年都发布对全球IaaS平台进行评估的魔力象限报告。2023年底,Gartner将此项评估的名称改为“战略性云平台服务”(Strategic cloud platform services),尽管其核心仍为IaaS,但是,毫无疑问&#xff0c…

算法工程师必知必会的数学基础之微积分下篇

系列文章: 第一篇:算法工程师必知必会的数学基础之线性代数第二篇:算法工程师必知必会的数学基础之微积分上篇第三篇:算法工程师必知必会的数学基础之微积分下篇(本文) 文章目录 2. 微积分2.7 泰勒级数&am…

【大模型从入门到精通24】开源库框架LangChain Embedding的力量1

这里写目录标题 嵌入的力量什么是嵌入?创建嵌入的详细过程嵌入在语义搜索中的应用向量存储:相似向量的有效检索关键特性与操作选择向量存储的标准示例:Chroma 适用于快速原型开发和小型数据集结论 嵌入的力量 什么是嵌入? 嵌入是…

通过CLIP引导解码减轻大型视觉-语言模型中的幻觉问题

人工智能咨询培训老师叶梓 转载标明出处 大型视觉-语言模型(LVLMs)因其在视觉推理方面的能力而备受瞩目,被视为实现自主操作智能体的重要里程碑。但它在生成文本时容易出现对象幻觉问题,即描述中包含不存在的对象,这严…

一文带你入门大模型微调

大模型相关目录 大模型,包括部署微调prompt/Agent应用开发、知识库增强、数据库增强、知识图谱增强、自然语言处理、多模态等大模型应用开发内容 从0起步,扬帆起航。 swift与Internvl下的多模态大模型分布式微调指南(附代码和数据&#xff…

MTK 相机功耗拆解方法

和你一起终身学习,这里是程序员Android 经典好文推荐,通过阅读本文,您将收获以下知识点: 一、硬件功耗二、相机软件功耗三、参考文档 一、硬件功耗 1.1 硬件信息 以下硬件信息最好提前获取到 模块备注平台MTK or Qcom or sprdCPU频率大中小核…

【Qt开发】事件与信号/事件过滤器

事件与信号/事件过滤器 事件一、事件的产生二、事件的派发三、事件类和事件类型四、事件的处理 事件与信号事件过滤器 事件 Qt系统的图形化窗口是由事件驱动的。,点击鼠标、按键,改变窗口大小、最小化窗口、关闭窗口等都会产生相应的事件。 QWidget类的所…

shuashuashua

CVE-2023-2130 靶标介绍: 在SourceCodester采购订单管理系统1.0中发现了一项被分类为关键的漏洞。受影响的是组件GET参数处理器的文件/admin/suppliers/view_details.php中的一个未知函数。对参数id的操纵导致了SQL注入。可以远程发起攻击。 通过标靶介绍可以知道…

通过域名和HTTPS上线MSF

使用受信任证书的Meterpreter载荷 现在大多数安全解决方案还会通过分析进出目标机器的流量来进行网络入侵检测。在这种情况下,很可能即使使用编码器绕过了防病毒软件,但有效载荷也会在尝试连接到我们的侦听器时被捕获和拦截。 # 准备工作 首先需要准备…

FPGA开发——UART回环实现之接收模块的设计

一、简介 因为我们本次进行串口回环的实验的对象是FPGA开发板和PC端,所以在接收和发送模块中先编写接收模块,这样可以在后面更好的进行发送模块的验证。(其实这里先编写哪个模块)都不影响,这里看自己心情,反…

大语言模型微调框架Unsloth:简化模型微调流程,提升模型性能

Unsloth 将 Llama-3、Mistral、Phi-3 和 Gemma 等大型语言模型的微调速度提高了 2 倍,内存使用量减少了 70%,而且准确性不会降低! 特点 通过手动派生所有计算繁重的数学步骤和手写 GPU 内核,unsloth 可以在不更改任何硬件的情况…

IMU助力跑步参数评估

近期,中国研究团队开发了一种创新的跑步参数评估方法,巧妙结合了IMU和多模态神经网络技术,旨在深入研究并有效评估跑步时的步态参数。 科研团队采用IMU传感器,将其固定在跑者的脚踝处,以实时监测并记录跑步时脚踝的加速…

如何利用RPA自动化流程机器人优化企业财务流程

随着企业规模的扩大和业务的复杂性增加,财务流程管理成了一个关键而复杂的任务。传统的财务流程往往涉及大量的重复性、繁琐的工作,不仅效率低下,而且容易出错。为了解决这些问题,越来越多的企业开始引入RPA机器人流程自动化来优化…

JAVA集中学习第五周学习记录(二)

系列文章目录 第一章 JAVA集中学习第一周学习记录(一) 第二章 JAVA集中学习第一周项目实践 第三章 JAVA集中学习第一周学习记录(二) 第四章 JAVA集中学习第一周课后习题 第五章 JAVA集中学习第二周学习记录(一) 第六章 JAVA集中学习第二周项目实践 第七章 JAVA集中学习第二周学…

打开Office(word、excel、ppt)显示操作系统当前的配置不能运行此应用程序最全解决方案!

我以前用过分区助手把office从c盘挪到d盘了,从那以后office就用不了了,然后我就删了(貌似没删干净)。 最近由于有使用word的需求,所以我从学校官网找到正版软件的安装包,按照步骤重新卸载电脑中office残留…

基于Java的民宿管理系统

TOC springboot306基于Java的民宿管理系统 第1章 绪论 1.1选题动因 当前的网络技术,软件技术等都具备成熟的理论基础,市场上也出现各种技术开发的软件,这些软件都被用于各个领域,包括生活和工作的领域。随着电脑和笔记本的广泛…