友思特分享|不用3D点云,如何实现精准的物体识别与抓取?

news2025/2/23 12:46:10

摘要

面对技术变革的挑战,友思特 IDS相机以其卓越的图像识别和高速处理技术,为制造业提供了前沿的自动化解决方案。即使在复杂的光线条件下,友思特 IDS相机也始终保持稳定高效的表现。选择友思特,让您的生产力迈向更高峰,为企业带来无与伦比的竞争优势!

产品信息

友思特 IDS uEye XCP相机 

 

本文解决方案所使用型号:

U3-3680XCP

详细信息请参考:https://viewsitec.com/products/cameras/ueye/

一、制造业的挑战与转型

制造业目前面临许多挑战。为应对技术变革、环境挑战和全球化,制造业必须进行一系列调整,例如投资新技术、节约资源以及优化和保障供应链。在全球范围内运营的公司必须面对不断变化的环境,同时管理供应链中的问题。企业越来越倾向于将生产转移回本土市场。要提高本国制造的竞争力,企业不仅需要具备足够的韧性,还需要遵守严格的环境法规和实现成本效益战略,此外,还必须克服人员瓶颈。长时间以来,通过机器人实现自动化就成为重要驱动力,人工智能(AI)正在发挥越来越关键的作用。实现自动化的压力与日俱增,而机器人技术与之同步发展。要将AI技术真正融入企业生产流程,就需要尽可能简化AI集成过程,并缩短培训阶段,这两点至关重要。

二、AI自动化解决方案的创新

友思特致力于为制造业中的各种机器人应用提供全面AI解决方案,且重视提高组装任务或仓库物流的效率。解决方案能够处理快速货箱拣货或取放、实现机器零件的精确进料以及完成材料处理的不同工作步骤。这一系统易于集成,由一个机械臂模块、一个预装智能软件的计算单元和一个相机模块组成,每个相机模块都配备了两台友思特 uEye+ XCP相机。

图1  一个机械臂在两台友思特IDS相机帮助下定位和抓取零件

 

“相机的任务是拍摄一张包含待处理物体的区域照片。根据记录,软件可以分析场景并识别物体的确切位置。”友思特 IDS相机团队表示。其核心组件可以进一步处理图像,这是一款专门开发的自学习软件,用于预测零件的位置及其拾取点。该软件以AI为基础处理图像匹配任务,不再需要经典的3D点云。AI可以根据模拟数据实现独立学习,并极其精确地定位排除点和组件。用于零件识别和与机器人通信的AI模型由强大的GPU(图形处理单元)控制。该软件能够快速学习:“使用我们的软件包,系统可以在两到五分钟内定义新零件的选择点并配置应用。”友思特团队强调。

三、友思特相机的参与和配置

所采用的相机模块配备了两个节省空间的友思特XCP工业相机。两台友思特 IDS相机根据立体视觉原理,从不同视角提供物体场景的图像。挑战在于如何根据这些图像尽可能准确地确定要抓握的零件的位置。这一任务又一次落在AI的肩上。图像采集、AI模型和特殊图像处理相结合,可以非常精确地确定记录点和位置。3D货箱拾取的标准CAD应用通常使用结构光或传感器来实现这一点,它们在环境中投影,创建一个点云,然后尝试在其中找到零件。但在这里,我们并没有使用3D相机,而是使用了两台标准的友思特 IDS工业相机。

友思特 IDS相机参与解决方案的精度小于1毫米,这远高于竞争对手的系统。系统可以可靠检测各种零件,即使面对有光泽、反光或透明的零件也能顺利检测,这些情况往往是传统机器视觉系统的瓶颈。同时,它不受外部光线条件变化的影响。相机是这一解决方案的关键组件。它速度很快,推理时间仅需不到170毫秒,而同类解决方案通常需要1000毫秒以上。快速计算可以使货箱拾取装置的循环时间缩短到两到三秒。这确保了单次传送执行精准高效。而这又使得该系统成为目前市场上速度最快的AI图像识别系统之一。

图2  机械臂上的两台IDS相机提供图像,以便系统使用智能软件快速准确地进行进一步处理

 

SuperSpeed USB 5 Gbps相机在这一方面贡献尤为突出,即使应用的环境光线暗淡或光照条件不断变化,这款相机也能可靠提供高分辨率数据,用于详细的图像评估。相机所集成的传感器(1/2.5英寸504万像素的滚动快门CMOS传感器 onsemi AR0521)采用BSI(“背面照明”)像素技术,可以提供稳定的弱光性能,在近红外(NIR)范围的灵敏度也很高,因此友思特 uEye XCPs几乎在任何照明情况下都能提供高质量图像,而像素噪声很低。USB3 XCP配备小巧轻便的全外壳(29 x 29 x 17毫米,61克)和可旋紧USB Micro-B接头,特别适合与自动化领域的机器人和协作机器人结合使用。

友思特 XCP相机采用USB3,并兼容视觉标准(U3V / GenICam),因此可以轻松集成到任何图像处理系统中,几乎可以与各种配套软件一起使用。标准接口大大方便了集成:根据客户的要求,我们在系统中使用不同友思特 IDS相机。由于相机采用标准化接口,我们可以快速部署各种uEye型号相机。友思特 IDS产品组合中的各种相机与流行的镜头兼容,有助于最大限度提高产能。

由于配备了强大的友思特 IDS相机和智能软件,此系统速度极快、受关照条件影响小、组件带宽很高,所以特别适合生产环境中的自动化任务。

此外,该3D视觉系统集成简便,这也大大提高了效率。这一智能3D视觉系统可以在没有任何实际机器人训练的情况下立即投入使用,与传统方法相比,这大大提高了应用速度。因此,公司可以快速获得自动化带来的好处:自动化使运营更加高效、竞争力更强、更可持续,从而节约资源和成本,同时提高产品质量和员工安全性。

图3 强大的CPU控制AI模型,用于零件识别和与机器人的通信

四、应用前景

AI在机器人领域的应用仍处于初级阶段。由于需求不断增长,AI图像处理领域发展空间广阔,数据传输速率更高、传感器更快更大的相机将上市,此外还会推出具有可靠基本功能而价格更为低廉的型号。工业相机越来越小,价格也越来越便宜。这将推动更多应用问世。

我们的愿景是赋予机器人与人类同等水平的能力。如果AI驱动的机器人可以完成单调的重复性任务,企业就可以将人力资源分配到更具创造性、更高效和更有价值的任务。

END

扫描上方客服二维码 ⇧
快速了解产品信息

友思特·智能感知

虹科集团旗下子公司友思特是领先的智能感知与机器视觉解决方案提供商,致力于帮助各行业客户提高效率、改善生产质量。围绕智能制造、智能交通、医疗健康等领域,为用户提供视觉检测与识别、图像采集和FPGA图像处理,以及智慧交通、智慧城市等解决方案。

作为专业的智能感知与视觉解决方案提供商,我们可以为您提供以下产品和服务:

✓ 视觉检测和识别。

✓ 各具特点的3D相机。

✓ 图像采集与处理。

✓ 集成Nvidia边缘计算和高带宽采集接口的专业视觉边缘计算机。

✓ 适用于不同场景的雷达。

✓ 一站式打包视觉方案

我们已经陆续完成了包括华为、三菱、南方电网等客户的自动驾驶传感器图像采集、高端机器人图像处理、工件质量识别等项目。详情请访问官网 https://viewsitec.com/

获取电子版资料&咨询更多解决方案&探讨技术问题,欢迎添加下方友思特技术工程师微信!

 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1159299.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Redis常见的全局命令

Redis中最核心的两个命令set和get 两个最核心的命令就是get和set. redis是按照键值对的方式来存储数据的,所以set就表示把key-value存储进去,get表示根据key来查询对应的value. 需要注意的是,必须进入redis客户端才能输入redis命令. 此处的key和value都是字符串类型.对于上述…

速谈 Beyond Compare 使用步骤

相信很多从事校对工作的工作者都听说过Beyond Compare软件。这是一款专业级的文件夹和文件对比工具,使用它可以很方便地对比出两个文件夹或文件的不同之处。很大程度上提高校对的准确率。但是一些初级使用者可能对Beyond Compare不是很了解,不知道该如何…

PostgreSQL 工具的相关介绍

1.1 psql工具 psql是PostgreSQL中的一个命令行交互式客户端工具,类似 Oracle中的命令行工具sqlplus,它允许用户交互地键入SQL语句或命 令,然后将其发送给PostgreSQL服务器,再显示SQL语句或命令的结 果。 1.2 psql的简单使用 使用…

Django之FBV和CBV

一、FBV与CBV 在我们日常学习Django中,都是用的FBV(function base views)方式,就是在视图中用函数处理各种请求。而CBV(class base view)则是通过类来处理请求。 Python是一个面向对象的编程语言&#xff0…

LLM增强

从公众号转载,关注微信公众号掌握更多技术动态 --------------------------------------------------------------- 一、增强语言大模型基础 1.大语言模型存在的不足 存 在 “ 幻 觉 ” , 容 易 一 本 正 经 胡 说 八 道提 示 直 接 决 定 回 复 质 量…

Django实战项目-学习任务系统-自定义URL拦截器

接着上期代码框架,6个主要功能基本实现,剩下的就是细节点的完善优化了。 首先增加URL拦截器,你不会希望没有登录用户就可以进入用户主页各种功能的,所以增加URL拦截器可以解决这个问题。 Django框架本身也有URL拦截器&#xff0…

链表的引入

什么是链表 链表一种线性的数据结构,通过指针将一个个零散的内存块连接起来,链表的每个内存块称为结点。结构体指针在这里得到了充分的利用。 为什么要使用链表 链表可以动态的进行存储分配,也就是说,链表是一个功能极为强大的数…

3.13每日一题(分部积分求不定积分)

关键在于看出两类不同类型函数的乘积,要把三角和对数以外的凑到dx上,然后分部积分 注: arctan根号x 的求导为复合求导 根号x分之一的原函数为2*根号x

纳米银线 纳米银纳米线 平均直径: 50-100nm

(西)纳米银线 (安)含量(%):99.9 (瑞)平均直径: 50-100nm (20nm 30nm 60nm ) (禧)长度:10um …

VBA技术资料MF77:组合所选范围中的所有形状

我给VBA的定义:VBA是个人小型自动化处理的有效工具。利用好了,可以大大提高自己的工作效率,而且可以提高数据的准确度。我的教程一共九套,分为初级、中级、高级三大部分。是对VBA的系统讲解,从简单的入门,到…

照片如何打包?三个方法轻松搞定!

照片打包是一种有效的管理方式,可以提高工作效率、保护照片安全、节省存储空间等。那么如何简单快速地打包照片呢?下面介绍了三种方法~ 方法一:使用嗨格式压缩大师 1、在电脑上打开【嗨格式压缩大师】,点击软件首界面的【图片压缩…

知了汇智为成都理工大学物联网专业学子开展项目实训

随着数字化产业的发展以及产业数字化转型的深入,产业对数字人才的需求也在发生变化。为了培养适应市场需求的高素质物联网专业人才,11月14日,知了汇智携手成都理工大学,为2021级物联网专业学生带来一场别开生面的校内项目实训。 成…

python文件的操作以及简易shadow文件密码破解器

python文件对象以及简易shadow文件密码破解器 文章目录 python文件对象以及简易shadow文件密码破解器文件对象的方法 打开文件关闭文件文件读取文件指针的刷新文件迭代写入文件write()writelines() 案例shawod密码破解脚本 文件对象的方法 常用函数功能f open(‘PATH’)打…

golang工程——opentelemetry简介、架构、概念、追踪原理

opentelemetry 简介 OpenTelemetry,简称OTel,是一个与供应商无关的开源可观测性框架,用于检测、生成、收集和导出 遥测数据,如轨迹、度量、日志。OTel的目标是提供一套标准化的供应商无关SDK、API和工具,用于接 收、…

有哪些项目适合程序员业余时间做,并且短期内能赚点小钱?

要我说,程序员赚点小钱就别指望着自己搞个大项目了。 这几年的市场环境不好,如果你没点家底的话,打工攒的那点积蓄让你创业,一不小心就会血本无归。 对于程序员来说,最合适的还是给别人打工!低风险稳定回款…

盗版gpt去广告

一. 内容简介 盗版gpt去广告 二. 软件环境 2.1 Tampermonkey 三.主要流程 3.1 创建javascript脚本 点击添加新脚本 就是在 (function() {use strict;// 在这编写自己的脚本 })();脚本,含解析 // UserScript // name 盗版gpt去广告 // namespace …

亿咖通·天穹Pro行泊一体智能驾驶计算平台正式量产

全球出行科技公司亿咖通科技宣布,旗下首款智能驾驶计算平台——亿咖通•天穹Pro行泊一体智能驾驶计算平台(以下简称“该平台”)已向车企正式量产交付。作为亿咖通科技在智能驾驶领域的全新突破,亿咖通•天穹Pro智能驾驶计算平台以…

Centos7安装Docker,安装DockerCompose(集群化部署),Docker私服镜像仓库

0.安装Docker Docker 分为 CE 和 EE 两大版本。CE 即社区版(免费,支持周期 7 个月),EE 即企业版,强调安全,付费使用,支持周期 24 个月。 Docker CE 分为 stable test 和 nightly 三个更新频道…

element-plus的el-tag标签关闭标签时的高亮显示逻辑

1.tag 实战步骤 首页的tag一开始就会存在,而且是不能进行删除的 当点击左侧栏的时候,如果tag没有该菜单名称则新增,如果已经有了那么当前tag背景为蓝色。 删除当前tag,如果是最后一个,那么路由调整到它前面那个标签并且背景变蓝…

LV.12 D13 UART实验 学习笔记

一、UART帧格式详解 UART Universal Asynchronous Receiver Transmitter 即 通用异步收发器,是一种通用的串行、异步通信总线 该总线有两条数据线,可以实现全双工的发送和接收,在嵌入式系统中常用于主机与辅助设备之间的通信。 通…