OpenCV 图形API(3)高层次设计概览

news2025/4/4 6:54:35
  • 操作系统:ubuntu22.04
  • OpenCV版本:OpenCV4.9
  • IDE:Visual Studio Code
  • 编程语言:C++11

描述

G-API 是一个异构框架,提供了统一的 API 来使用多个支持的后端编程图像处理流水线。

关键的设计理念是在指定使用哪些内核和设备时保持流水线代码本身的平台中立性,这通过在图编译(配置)时使用额外的参数来实现。这一要求导致了如下架构:
在这里插入图片描述

G-API 框架架构
在这一架构中有三个层次:
  • API层 – 这是顶层,实现了G-API的公共接口、其构建块及其语义。当用户使用G-API构建一个流水线时,他直接与此层交互,用户操作的实体(如cv::GMat或cv::GComputation)由这一层提供。

  • 图编译器层 – 这是中间层,它将用户的计算展开成图,然后对其应用一系列转换(例如优化)。这一层建立在ADE框架之上。

  • 后端层 – 这是最底层,列出了多个后端。与上述两层相比,后端与低级平台细节高度耦合,每个后端代表一个特定的平台。后端对来自图编译器的处理过的图进行操作,并针对特定平台或设备最优地执行这个图。

API层

API层是用户在定义和使用流水线(在G-API术语中称为计算)时直接交互的部分。API层定义了一组G-API动态对象,这些对象可以用作图中的输入、输出和中间数据对象:

  • cv::GMat
  • cv::GScalar
  • cv::GArray(模板类)

API层还指定了可以应用于这些数据对象的一系列操作——即所谓的内核。有关G-API默认提供的操作的详细信息,请参见G-API的核心和imgproc命名空间。

G-API不限于这些操作——用户可以使用特殊的宏G_TYPED_KERNEL()轻松定义自己的内核。

API层还负责在创建流水线时对操作参数进行编组和存储。除了上述提到的G-API动态对象外,操作还可以接受任意参数(更多详情见此处),因此API层会在执行时捕获这些值并内部存储。

最后,cv::GComputation和cv::GCompiled是API层中剩余的重要组件。前者将一系列G-API表达式封装到一个对象(图)中,而后者是图编译的产物(详见此章节)。

图编译器层

每个G-API计算在执行之前都会被编译。编译过程通过两种方式触发:

  • 隐式编译,当使用cv::GComputation::apply()时触发。在这种情况下,图编译紧接着立即执行。
  • 显式编译,当使用cv::GComputation::compile()时触发。这种情况下,将返回一个cv::GCompiled对象,该对象可以像C++函数对象一样被调用。

第一种方式适用于输入数据格式事先未知的情况——例如,当数据来自任意输入文件时。第二种方式推荐用于部署(生产)场景,在这些场景中,输入数据特征通常是预定义的。

图编译过程建立在ADE框架之上。最初,根据API层捕获的表达式生成一个二分图。这个图包含两种类型的节点:数据和操作。图总是以一个或多个数据节点开始和结束,其间是操作节点。每个操作节点都有输入和输出,它们都是数据节点。

在初始图生成之后,它实际上会经过一系列称为“passes”的图变换处理。ADE框架充当编译pass管理引擎,而passes是专门为G-API编写的。

存在不同的passes来检查图的有效性、细化操作和数据的细节、基于亲和性或用户指定的区域化[TBD]将节点组织成集群(“Islands”),等等。后端也能够在编译过程中注入特定于后端的passes,更多关于这方面的信息请参见专门的章节。

图编译的结果是一个编译后的对象,由类cv::GCompiled表示。无论是否有显式或隐式的编译请求(见上文),都会创建一个新的cv::GCompiled对象。实际的图执行是在cv::GCompiled内发生的,并由参与图编译的后端决定。

另请参阅:

  • cv::GComputation::apply()
  • cv::GComputation::compile()
  • cv::GCompiled

后端层

上述图表列出了两个后端:OpenCV和Fluid。OpenCV被称为“参考后端”,它使用传统的OpenCV函数实现G-API操作。这个后端对于在熟悉的开发系统上进行原型设计非常有用。Fluid是一个插件,用于在CPU上高效执行缓存——它实现了不同的执行策略,并使用其特有的内核。Fluid后端允许在CPU上运行时减少内存占用并提高内存局部性。

可能还有更多的后端可用,例如Halide、OpenCL等——G-API提供了一个统一的内部API来开发后端,因此任何爱好者或公司都可以自由地在新平台或加速器上扩展G-API。在OpenCV基础设施方面,每个新的后端都是一个新的独立OpenCV模块,当作为OpenCV的一部分构建时,它扩展了G-API。

图执行

图的执行方式由编译时选择的后端定义。实际上,每个后端在图编译过程的最终阶段生成自己的执行脚本,即创建可执行(编译)对象时。例如,在OpenCV后端中,这个脚本只是需要调用的OpenCV函数的拓扑排序序列;对于Fluid后端,情况类似——是每次迭代处理输入行的代理(Agents)的拓扑排序列表。

图执行通过两种方式触发:

  • 通过cv::GComputation::apply(),为给定的输入数据即时编译图;
  • 通过cv::GCompiled::operator()(),当图已被预编译时使用。

这两种方法都是多态的,接受变长参数列表,并在运行时执行有效性检查。如果传递的数据对象的数量、形状和格式与预期不符,则会抛出运行时异常。G-API还提供了类型包装器,将这些检查移到编译时——参见cv::GComputationT<>。

G-API图执行声明为无状态的——这意味着已编译的函数对象(cv::GCompiled)就像一个纯粹的C++函数一样工作,并对相同的输入参数集提供相同的结果。

这两种执行方法都接受N+M个参数,其中N是输入数量,M是在其上定义cv::GComputation的输出数量。请注意,虽然在定义中使用了G-API类型(如cv::GMat等),但执行方法接受持有实际数据的传统OpenCV数据类型(如cv::Mat)——参见参数编组中的表格。

另请参阅:
实现细节
内核API

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2326702.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

碰一碰发视频网页版本开发的源码搭建指南

引言 在数字化信息快速传播的时代&#xff0c;近场通信&#xff08;NFC&#xff09;技术为信息交互带来了新的便捷方式。通过网页版本实现碰一碰发视频功能&#xff0c;能够让用户在浏览器环境中轻松实现视频分享&#xff0c;拓展了视频传播的途径。本文将详细介绍碰一碰发视频…

【含文档+PPT+源码】基于Python爬虫二手房价格预测与可视化系统的设计与实现

项目介绍 本课程演示的是一款基于Python爬虫二手房价格预测与可视化系统&#xff0c;主要针对计算机相关专业的正在做毕设的学生与需要项目实战练习的 Java 学习者。 包含&#xff1a;项目源码、项目文档、数据库脚本、软件工具等所有资料 带你从零开始部署运行本套系统 该项…

Redis-16.在Java中操作Redis-Spring Data Redis使用方式-操作有序集合类型的数据

一. 操作有序集合类型的数据 package com.sky.test;import org.junit.jupiter.api.Test; import org.springframework.beans.factory.annotation.Autowired; import org.springframework.boot.test.context.SpringBootTest; import org.springframework.data.redis.core.*;imp…

STM32智能手表——任务线程部分

RTOS和LVGL我没学过&#xff0c;但是应该能硬啃这个项目例程 ├─Application/User/Tasks # 用于存放任务线程的函数 │ ├─user_TaskInit.c # 初始化任务 │ ├─user_HardwareInitTask.c # 硬件初始化任务 │ ├─user_RunModeTasks.c…

SQL命令

一、表的创建 SQL MS Access、MySQL 和 SQL Server 数据类型 | 菜鸟教程 SQL Server 和 MySQL 中的 Date 函数 | 菜鸟教程 1.1、创建表 CREATE TABLE Citys (CityID int PRIMARY KEY,CityName varchar(255) );CREATE TABLE Per (PersonID int PRIMARY KEY, …

终端SSH连接工具SecureCRT安装和连接Linux

SecureCRT 9.5是一款集终端仿真与加密功能于一身的专业软件&#xff0c;其坚如磐石的安全性、高效的信息传输能力以及高度可定制的会话管理&#xff0c;使得它成为众多用户的首选。该软件不仅支持SSH2、SSH1、Telnet等多种协议&#xff0c;还提供了Relogin、Serial、TAPI、RAW等…

赛逸展2025“创新引擎”启动:限量席位,点亮科技绿色新征程

当今时代&#xff0c;科技革新与绿色发展已然成为推动社会进步的双引擎。2025第七届亚洲消费电子技术贸易展&#xff08;赛逸展&#xff09;敏锐捕捉这一趋势&#xff0c;重磅打造“科技创新专区”&#xff0c;并面向科技、绿色企业吹响限量招募号角。 这个独具特色的专区紧扣…

FPGA实现数码管显示分秒时间

目录 一. verilog实现 二. 烧录验证 三. 结果验证 使用开发板&#xff1a;DE2-115开发板 一. verilog实现 要实现分和秒&#xff0c;需要知道定时器的频率&#xff0c;通过查手册可知&#xff0c;我使用的开发板时钟为50hz&#xff0c;也就是时钟一个周期是2微秒。 5000000…

可视化开发:用Qt实现Excel级动态柱状图

Qt柱状图 QtChart 首先我们介绍一下 图表建立的基础&#xff1a;Qt Charts QtChart 是Qt框架的一个模块&#xff0c;专注与提供交互式数据可视化功能 俗话就是 用于用户轻松创建各种类型的图表和图形界面 它包含的图表类型有很多&#xff1a;折线图&#xff0c;饼图&#x…

从零实现Json-Rpc框架】- 项目实现 - 基于Dispatcher模块的RPC框架

&#x1f4e2;博客主页&#xff1a;https://blog.csdn.net/2301_779549673 &#x1f4e2;博客仓库&#xff1a;https://gitee.com/JohnKingW/linux_test/tree/master/lesson &#x1f4e2;欢迎点赞 &#x1f44d; 收藏 ⭐留言 &#x1f4dd; 如有错误敬请指正&#xff01; &…

kubekey -实现懒人一键部署K8S集群

kubekey -实现懒人一键部署K8S集群 操作步骤 官网&#xff1a; https://kubesphere.io/zh/ 一、执行以下命令快速创建一个 Kubernetes 集群。 Master节点 如果您访问 GitHub/Googleapis 受限&#xff0c;请登录 Linux 主机&#xff0c;执行以下命令设置下载区域。 [roottest ~]…

李宏毅机器学习笔记(1)—机器学习基本概念+深度学习基本概念

机器学习基本概念 1、获取模型 步骤 1.1、假定未知函数 带未知参数的函数 1.2、定义损失函数 真实值&#xff1a;label MAE MSE 几率分布&#xff0c;cross-entropy? 1.3、优化 单独考虑一个参数 让损失函数最小&#xff0c;找导数为零的点 单独考虑w&#xff0c;w…

数字IC后端项目常见问题之streamOut layermap和innovus drc violation

Q1&#xff1a;我需要将Innovus设计GDS导出到Virtuoso&#xff0c;但发现写出GDS的过程会报如下所示的警告。这里写出GDS使用的是Virtuoso (DFII) streamOut mapping文件&#xff01; Clock Gen模块Routing DRC&#xff0c;Timing分析及解决 streamOut tease.gds2 -mapFile cd…

短剧系统开发动漫短剧系统源码开发上线小程序app教程

一、市场规模与用户增长&#xff1a;突破677亿&#xff0c;Z世代成主力 整体扩张 2025年短剧市场预计同比增长15%&#xff0c;规模达677.9亿元&#xff0c;用户规模6.62亿&#xff08;占网民59.7%&#xff09;。动漫短剧作为细分领域&#xff0c;增速显著受益于二次元文化渗透&…

太阳能高杆路灯:照亮未来的新光

在全球能源转型进程加速以及可持续发展理念日益深入人心的背景下&#xff0c;太阳能高杆路灯作为融合新能源技术、智能控制技术与多功能集成特性的创新产品&#xff0c;正逐步革新传统路灯的格局。其不仅有效解决了传统路灯对电网供电的依赖问题&#xff0c;更为城市及乡村的照…

《C++Linux编程进阶:从0实现muduo 》-第8讲.C++面试如何高效获取线程ID

章节重点 在C面试时&#xff0c;经常被问到如果高效获取线程ID&#xff0c;但不少同学都不知道如何回答。 重点是通过__thread关键字。 重点内容 视频讲解&#xff1a;《CLinux编程进阶&#xff1a;从0实现muduo C网络框架系列》-第8讲. C面试如何高效获取线程ID 测试获取线…

【Tauri2】011——菜单menu(2)

前言 前面简单地创建了菜单&#xff0c;接下来就来试试菜单中的action Rust中菜单项注册action AppHandle in tauri - Rusthttps://docs.rs/tauri/2.4.0/tauri/struct.AppHandle.html#method.on_menu_event这就需要用到App或者AppHandle中的方法on_menu_event #[must_use] …

架构设计基础系列:面向对象设计的原则

引言 面向对象设计&#xff08;Object-Oriented Design&#xff0c;OOD&#xff09;是软件开发中的重要概念&#xff0c;其核心在于通过对象、类、继承、封装和多态等机制&#xff0c;实现对现实世界问题的抽象和建模。OOD不仅有助于提高代码的可重用性、可维护性和可扩展性&a…

UE5学习笔记 FPS游戏制作35 使用.csv配置文件

文章目录 导入.csv要求首先创建一个结构体导入配置文件读取配置 导入 .csv要求 第一行必须包含标题 第一列的内容必须不能重复&#xff0c;因为第一列会被当成行的名字&#xff0c;在数据处理中发挥类似于字典的key的作用 当前的配置文件内容如下 首先创建一个结构体 结构…

嵌入式单片机ADC数模转换的基本方法

第一:模数转换的概述 1:模数转换的概念 一般在电路中,信号分为两种,一种是模拟信号,一种是数字信号,绝大多数传感器采集的都是模拟信号,如温度、湿度、烟雾浓度、亮度.......,但是对于计算机需要处理的数字信号,那就需要利用电路把模拟信号转换为数字信号,这个转换的…