热成像技术创新,助力人工智能炼就黑夜中的火眼金睛

news2025/2/13 1:04:26

原创 | 文 BFT机器人 

图片

普渡大学(Purdue University)的研究人员利用他们正在申请专利的方法来改进传统的机器视觉和感知,从而推动机器人技术和自动控制领域的发展。

埃尔莫尔家族电气与计算机工程学院(Elmore Family School of Electrical and Computer Engineering)电气与计算机工程副教授祖宾-雅各布(Zubin Jacob)和研究科学家包芳琳(Fanglin Bao)开发出了HADAR(热辅助探测与测距)。他们的研究成果登上了 7 月 26 日出版的同行评审期刊《自然》(Nature)的封面。

雅各布说,预计到 2030 年,每 10 辆汽车中就有一辆是自动驾驶汽车,将有 2000 万名机器人助手为人们提供服务。

图片

雅各布说:"这些代理中的每一个都将通过先进的传感器收集周围场景的信息,从而在没有人类干预的情况下做出决策。"然而,从根本上讲,由众多代理同时感知场景是令人望而却步的。

传统的有源传感器,如激光雷达(即光探测和测距)、雷达和声纳,都是先发射信号,然后再接收信号,以收集场景的三维信息。这些方法的缺点随着规模的扩大而增加,包括信号干扰和对人眼安全的威胁。相比之下,依靠阳光或其他光源工作的摄像机虽然具有优势,但在夜间、雾或雨等弱光条件下却存在严重障碍。

图片

传统热成像技术是一种完全被动的传感方法,可收集来自场景中所有物体的不可见热辐射。它可以穿越黑暗、恶劣天气和太阳强光进行感应。但雅各布说,基本的挑战阻碍了它在今天的应用。

"物体及其环境会不断发射和散射热辐射,从而导致无纹理图像,这就是著名的鬼影效应,"Bao 说。"人脸的热图像只显示轮廓和一些温度对比,没有任何特征,让人感觉像看到了鬼魂。这种信息、纹理和特征的损失是利用热辐射进行机器感知的障碍。

HADAR 结合了热物理学、红外成像和机器学习,为实现完全被动和物理感知的机器感知铺平了道路。

"我们的工作建立在热感知的信息理论基础之上,表明漆黑环境中的信息量与大白天的信息量相同。进化使人类偏向于白天。雅各布说:“未来的机器感知将克服这种长期存在的昼夜二分法。”

Bao 说:"HADAR 能从杂乱的热信号中生动地恢复出纹理,并准确地将场景中所有物体的温度、发射率和纹理(TeX)区分开来。它能像白天一样透过黑暗看到纹理和深度,还能感知 RGB(红绿蓝)、可见光成像或传统热感应之外的物理属性。令人惊讶的是,它竟然可以像白天一样透过漆黑的环境看到物体"。

研究小组使用越野夜景对 HADAR TeX 视觉进行了测试。

"HADAR TeX 视觉系统恢复了纹理并克服了重影效应,"Bao 说。"除了草地的细节,它还恢复了水波纹、树皮皱纹和涵洞等精细纹理"。

HADAR 的其他改进还包括改善硬件尺寸和数据采集速度。

"目前的传感器又大又重,因为 HADAR 算法需要多种颜色的不可见红外辐射,"Bao 说。"要将其应用于自动驾驶汽车或机器人,我们需要缩小尺寸、降低价格,同时使相机的速度更快。目前的传感器创建一幅图像大约需要一秒钟,但对于自动驾驶汽车来说,我们需要大约30到60赫兹的帧频,即每秒一帧。

HADAR TeX视觉技术的最初应用是在复杂环境中与人类互动的自动驾驶汽车和机器人。该技术还可进一步应用于农业、国防、地球科学、医疗保健和野生动物监测等领域。

作者 | Tina

排版 | 居居手

注:文章版权归原作者所有,如有不妥,请联系删除。转载请联系本公众号获得授权。 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/864075.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Git使用教程(看完会了也懂了)

本文简单的记录一下Git的一些基本的概念和基础的操作,主要是弄懂基本的东西,能够快速的上手并开始使用;但是更多深层的原理和应用还是需要另外去进一步学习的。 创建版本库 我们先整一个git仓库,再来看看基本概念; 新…

免费插件-illustrator-Ai插件-印刷功能-二维码生成

文章目录 1.介绍2.安装3.通过窗口>扩展>知了插件4.功能解释5.示例5.1.QR常用二维码5.2.PDF4175.3.EAN13 6.总结 1.介绍 本文介绍一款免费插件,加强illustrator使用人员工作效率,进行二维码生成。首先从下载网址下载这款插件 https://download.csd…

国际顶级学术会议ISSTA召开,中山大学与微众银行联合发表区块链最新研究成果

美国当地时间7月17日,软件工程领域顶级会议ISSTA 2023在西雅图正式召开。ISSTA (The 32nd ACM SIGSOFT International Symposium on Software Testing and Analysis )是软件测试与分析方面最著名的国际会议之一,也是中国计算机学会…

中国钢铁工业协会 :2022年钢铁行业经济运行报告(附下载)

关于报告的所有内容,公众【营销人星球】获取下载查看 核心观点 2022年,我国粗钢产量10.18亿吨,比上年下降1.7%,连续两年下降,降幅比上年收窄。2022年,出口钢材 6732万吃,比上年增长0.9%;进口钢…

RabbitMQ:可靠消息传递的强大消息中间件

消息中间件在现代分布式系统中起着关键作用,它们提供了一种可靠且高效的方法来进行异步通信和解耦。在这篇博客中,我们将重点介绍 RabbitMQ,一个广泛使用的开源消息中间件。我们将深入探讨 RabbitMQ 的特性、工作原理以及如何在应用程序中使用…

javaScript:文档流写入和元素写入

目录 前言 文档流写入 把元素直接写入到文档流 注意​编辑 注意 元素写入 注意 innerHTML 特点: 设置内容 获取内容 innerText 特点: 注意 相关代码 前言 在JavaScript中,文档流写入是指将内容直接写入到DOM(文档对…

用户生成内容(UGC)与海外网红营销:激活品牌传播的力量

互联网和社交媒体的迅速发展为品牌营销带来了前所未有的机遇。用户生成内容(UGC)是指由普通用户自发创作、分享和发布的各种内容,而海外网红是指在海外社交平台上拥有大量粉丝和影响力的人物。这两者结合,为品牌传播带来了强大的推…

【C++11】类的新功能 | 可变参数模板

文章目录 一.类的新功能1.默认成员函数2.类成员变量初始化3.强制生成默认函数的关键字default4.禁止生成默认函数的关键字delete5.继承和多态中final与override关键字 二.可变参数模板1.可变参数模板的概念2.可变参数模板的定义方式3.参数包的展开方式①递归展开参数包②逗号表…

虚拟展览馆有哪些优势?如何打造自己的虚拟展览馆

引言: 随着科技的不断创新与发展,虚拟展览馆作为一种全新的文化体验方式,正逐渐引起人们的关注。虚拟展览馆以其便捷、创新、可定制的特点,为参观者提供了前所未有的沉浸式体验。 一.什么是虚拟展览馆? 虚…

MongoDB【无敌详细,建议收藏】

"探索MongoDB的无边之境:沉浸式数据库之旅" 欢迎来到MongoDB的精彩世界!在这个博客中,我们将带您进入一个充满创新和无限潜力的数据库领域。无论您是开发者、数据工程师还是技术爱好者,MongoDB都将为您带来一场令人心动…

修改element-plus主题色

修改element-plus主题色 前提:要安装按需引入和自动导入插件 ​npm install -D unplugin-vue-components unplugin-auto-import文章目录 修改element-plus主题色一、安装插件二、新建一个element的覆盖scss文件三、配置 一、安装插件 npm install -D unplugin-vu…

重启服务器引发的Docker异常

公司使用云服务器需要硬盘扩容,服务器重启才生效。 重启以后发现拉取远程镜像的命令登录失败了! 然后发现找不到容器和镜像列表了,但是容器都启动了。 查看docker运行状态都是正常的 systemctl is-active docker systemctl status docker.…

原生JS手写扫雷小游戏

场景 实现一个完整的扫雷游戏需要一些复杂的逻辑和界面交互。我将为你提供一个简化版的扫雷游戏示例,帮助你入门。请注意,这只是一个基本示例,你可以根据自己的需求进行扩展和改进。 思路 创建游戏板(Grid)&#xff1…

Vue [Day7] 综合案例

核心概念回顾 state:提供数据 getters:提供与state相关的计算属性 mutations:提供方法,用于修改state actions:存放异步操作 modules:存模块 功能分析 https://www.npmjs.com/package/json-server#ge…

企业运单管理教程

随着电子面单的普及,以及商务寄件稳步增加,快递公司为了留住商企客户,推出了月结协议模式寄件。企业可以根据寄件量大小,和快递公司签订月结协议,运费每月结算一次,还能根据自身的寄件量,向快递…

评述6种室内定位技术的底层原理及未来展望

从古至今,人类始终关心一个颇具哲学意味的问题——“我在哪里”。从千年前的人类在夜空下遥望星河,到依靠经验和模糊的观测绘制的初具现代化意味的地图,再到近现代人类在计算机技术、无线通信技术甚至空间技术的帮助下,不断探索更…

ORA-04031

ORA-04031:unable to allocate 3264 bytes of shared memory 1、问题背景 修改SGA重启数据库后报错系统内存:8G 原SGA大小:3G 修改后SGA大小:5G数据库可以正常重启,但是trance日志一直在报错 2、解决办法 调整shared…

湘大 XTU OJ 1148 三角形 题解(非常详细):根据题意朴素模拟+观察样例分析需要计算几轮 具体到一般

一、链接 1148 三角形 二、题目 题目描述 给一个序列,按下面的方式进行三角形累加,求其和值。 比如序列为 1,2,3,4,5 1 2 3 4 53 5 7 98 12 1620 2848输入 有多组样例。每个样例的第一行是一个整数N(1≤N≤100),表示序列的大小&…

uni-app实现图片上传功能

效果 代码 <uni-forms-item name"ViolationImg" label"三违照片 :"><uni-file-picker ref"image" limit"1" title"" fileMediatype"image" :listStyles"listStyles" :value"filePathsL…

docker通用镜像方法,程序更新时不用重新构建镜像

docker通用镜像方法&#xff0c;程序更新时不用重新构建镜像。更新可执行文件后&#xff0c;重新启动容器就可运行。 功能 1、在demo目录下添加脚本文件start.sh&#xff0c;里面执行demo.jar文件。 2、将demo目录映射到镜像下的 /workspace目录。 3、Dockerfile文件中默认…