MIPI接口:(4)MIPI CSI-2协议详解(上)

news2025/3/4 13:30:14

1. 什么是CSI?

CSI(Camera Serial Interface)是MIPI联盟早期制定的摄像头接口标准,主要用于连接摄像头和处理器。

CSI-2CSI的第二代版本,在原有基础上进行了全面优化:

(1)分层架构CSI-2明确将协议分为应用层、协议层和物理层,并新增了虚拟通道功能,可支持多个摄像头通过同一物理链路传输数据。

(2)数据包机制CSI-2定义了长包(Long Packet短包(Short Packet两种格式。长包用于传输图像数据,短包用于同步信号(如帧开始、行结束等控制指令),而CSI仅支持单一数据格式。

2. CSI-2 Layer

类似于大家熟知的以太网协议,都是一层一层打包。分为三层:应用层(Application)、协议层(Protocol Layer)和物理层(PHY Layer)。下图中的Transmitter一般指摄像头模块,Receiver一般指处理摄像头数据的芯片(例如手机SoC)。

Figure 1. CSI-2 Layer

2.1 物理层

物理层是MIPI联盟定义的PHY规范。定义了传输媒介(如电导体)、输入/输出电路,以及时钟机制,用于从串行数据流中准确捕获“0”“1”

(1) 它规定了传输的线路、电路参数、时钟同步机制等,保证数据不会乱;

(2) 定义了信号的开始结束规则,确保数据有序传输。

2.2 协议层

在发射端,协议层的作用就是给数据加上Header和数据校验信息。

在接收端,协议层就是解析头部,然后交给对应的逻辑处理,同时进行错误检测,确保数据完整性和正确性。

1Pixel/Byte Packing/Unpacking Layer(像素/字节打包 & 解包层)

TX:这一层的作用就是将不同像素格式pixels(支持6bits-24bits)打包成字节(8bits),传到下一层Low Level Protocal.

RX:将从Low Level Protocol接收到字节解包成pixels,传到上一层Application

2Low Level Protocol(低级协议层,LLP

保证数据在SoTEoT之间是按字节和按位同步。传输的最小单位为1Byte

管理大小端Endian

3Lane Management(通道管理层)

在这一层,CSI-2是可扩展的(Lane-scalable),可以根据带宽需要选择传输通道的数目(1~4)。

TX:如果选择了多通道,在发射端需要将数据分配到各个通道进行并行传输。

RX:从多个通道接收数据,还原成原始数据流。

2.3 应用层

应用层主要负责higher-level的数据编码和数据解析,用于处理数据流中的信息。

3. CCI

CCI(Camera Control Interface是一个双线、双向、半双工的串行接口。

CCI用于控制CSI-2发送端(摄像头)。

CSI-2中,接收端(处理器)是CCI Master,发送端(摄像头)是CCI Slave

CCI相当于摄像头的控制器,用来让手机SoC控制摄像头的参数,比如分辨率、帧率、曝光等。

CCI基于I2CFast Mode 400KHz7bit地址寻址),但是不支持Multi-Master Mode。例如,一个手机有前后两个摄像头,一个CCI可以连接这两个摄像头(CCI slave),但是只有一个Master(手机处理器)。

通俗理解,CSI-2用来传照片,CCI用来调整相机参数

4. Multi-Lane Distribution and Merging

Multi-Lane Distribution时,可能会发生需要传输的总字节数不能被Lane数量整除。所有通道是同时发送,所以会存在部分通道提前结束的情况。每个 D-PHY 数据 Lane 独立工作,不受其他 Lane 影响。

Figure 2. Two Lane Multi-Lane Example

5. Low Level Protocol

LLP有两种数据包:长包(Long Packet)和短包(Short Packet)。

每个数据包开始,设备先从LP模式切换到HS模式,然后发送ST。结束时发现ET序列,回到LP模式。

Figure 3.  Low Level Protocol

6. Long Packet长包

Figure 4. Long Packet Structure

从上图可以得知:

(1)一个Long PacketPHPacket Header)、Data PayloadPFPacket Footer组成;

(2)PH进一步由DIWCECC组成。

DI定义虚拟通道(Virtual Channel, VC)和数据类型(Date Type, DT)。

WCWord Count):字数计数。解析完PH后,接收端会读取Word Count x 8bit的数据。在读取数据时,不会检查同步码(Sync Code)。即内容可以任意值。

ECC8bit纠错码。用于检测和修正包头中的错误。能够纠正1-bit错误,检测2-bit错误。

PF包含16bit校验码,用于检查数据包是否正确传输。

Date TypeDT):0x10~0x37代表不同的数据格式,具体如下表所示:

上表中,前2行表示的短包数据类型,后面6行表示的是长包数据类型。

短包数据类型格式展开如下表所示:

6.1 数据传输顺序

每个字节按照最低有效位(LSB)优先传输

多字节数据按照最低有效字节优先传输

6.2 包解析流程

1)读取SoT,进行数据包解析;

2)解析Packet Header,获得DIWord CountECC;

3)根据Word Count,读取Data Payload;

4)读取Packet Footer并检查checksum是否正确;

5)解析完后,等待EoT。然后继续等待下一个SoT处理下一个数据包。

7. Short Packet短包

Short Packe仅包含PH包头,没有包尾,没有Data Payload。包头中的WC字段会被短包数据字段替换。包头依然包含了8bit ECC,可以纠正1bit错误,检测2bit错误,确保数据的正确性。

从下图可以发现短包信息量相比长包很小,但是很关键,短包的作用如下:

(1) 帧同步数据(Frame Synchronization Data Type):代表帧号(Frame Number);

(2) 行同步数据(Line Synchronization Data Type):代表行号(Line Number);

(3) 通用短包数据(Generic Short Packet Data Type):用户自定义,可以存放任意内容。

Figure 5. Short Packet Structure 

Data IDVCDT两部分组成,如下图所示。VC位于高2bitDT为低6bit

Figure 5. Data Identifier Byte

VC的作用是在同一个数据流中提供多个独立数据通道,支持不同的数据流交错传输。接收端会检测VC号,并将交错的视频流正确拆分到对应的通道。由于VC 2bit,所以最多支持4个独立数据流,即有效的虚拟通道编号为03

外设中的VC标识符应支持可编程配置,这样Host Processor就可以控制数据流的解复用方式。

Figure 6. Logical Channel Block Diagram 

7.1 通用短包数据格式

传递额外的控制或者时间信息:

(1) 控制相机快门的开启、关闭;

(2) 触发闪光灯;

(3) 其他特定应用需要的同步信号。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2309518.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

防火墙旁挂组网双机热备负载均衡

一,二层交换网络: 使用MSTPVRRP组网形式 VLAN 2--->SW3为主,SW4 作为备份 VLAN 3--->SW4为主,SW3 作为备份 MSTP 设计 --->SW3 、 4 、 5 运行 实例 1 : VLAN 2 实例 2 : VLAN 3 SW3 是实例 1 的主根,实…

视频教育网站开源系统的部署安装 (roncoo-education)服务器为ubuntu22.04.05

一、说明 前端技术体系:Vue3 Nuxt3 Vite5 Vue-Router Element-Plus Pinia Axios 后端技术体系:Spring Cloud Alibaba2021 MySQL8 Nacos Seata Mybatis Druid redis 后端系统:roncoo-education(核心框架:S…

CF 886A.ACM ICPC(Java实现)

题目分析 输入6个值,判断某三个值的和能够等于另外三个值的和 思路分析 首先判断总和是不是一个偶数,如果不是就“NO”。由于小何同学算法不好,只能使用三层for循环强行判断某三个值是否能等于总和的一半,可以就“YES”。 代码 …

Spring Boot 自动装配深度解析与实践指南

目录 引言:自动装配如何重塑Java应用开发? 一、自动装配核心机制 1.1 自动装配三大要素 1.2 自动装配流程 二、自定义自动配置实现 2.1 创建自动配置类 2.2 配置属性绑定 2.3 注册自动配置 三、条件注解深度应用 3.1 常用条件注解对比 3.2 自定…

【windows driver】 开发环境简明安装教程

一、下载路径 https://learn.microsoft.com/en-us/windows-hardware/drivers/other-wdk-downloads 二、安装步骤: 1、安装Visual Studio IDE 笔者建议安装最新版本,可以向下兼容。发文截止到目前,VS2022是首选,当前笔者由于项…

探秘基带算法:从原理到5G时代的通信变革【八】QAM 调制 / 解调

文章目录 2.7 QAM 调制 / 解调2.7.1 概述2.7.2 星座图星座图的结构与性能发射端的信息编码与接收端的解码差分编码的分类与实现差分编码的模4格雷加法器公式16QAM星座图与映射关系 2.7.3 信号表达式正交振幅调制的基本原理与系统分析相位误差对QAM性能的影响多电平正交振幅调制…

Flink性能指标详解MetricsAnalysis

文章目录 Flink 组成1.JobManager2.TaskManager3.ResourceManager4.Dispatcher5.Client6. Env JobManager MetricsTaskManager Metrics Flink 组成 1.JobManager 管理任务 作业调度:负责接收和调度作业,分配任务到 TaskManager。资源管理:…

Halcon 车牌识别-超精细教程

车牌示例 流程: 读取图片转灰度图阈值分割,找车牌内容将车牌位置设置变换区域形状找到中心点和弧度利用仿射变换,斜切车牌旋转转正,把车牌抠出来利用形态学操作拼接车牌号数字训练ocr开始识别中文车牌 本文章用到的算子(解析) Halcon 算子-承接车牌识别-CSDN博客 rgb1_to_gray…

Redis实战篇《黑马点评》8 附近商铺

8.附近商户 8.1GEO数据结构的基本用法 GEO就是Geolocation的简写形式,代表地理坐标。Redis在3.2版本中加入了对GEO的支持,允许存储地理坐标信息,帮助我们根据经纬度来检索数据,常见的命令有 GEOADD:添加一个地理空间…

【02】Cocos游戏开发引擎从0开发一款游戏-cocos项目目录结构熟悉-调试运行项目-最重要的assets资源文件认识-场景sense了解-优雅草卓伊凡

【02】Cocos游戏开发引擎从0开发一款游戏-cocos项目目录结构熟悉-调试运行项目-最重要的assets资源文件认识-场景sense了解-优雅草卓伊凡 开发背景 接下来我们直接打开我们的项目开始进一步操作, 实战开发 导入项目 我把得到的项目解压到本地,我们开…

kafka-web管理工具cmak

一. 背景: 日常运维工作中,采用cli的方式进行kafka集群的管理,还是比较繁琐的(指令复杂?)。为方便管理,可以选择一些开源的webui工具。 推荐使用cmak。 二. 关于cmak: cmak是 Yahoo 贡献的一款强大的 Apac…

Unity中动态切换光照贴图LightProbe的方法

关键代码:LightmapSettings.lightmaps lightmapDatas; LightmapData中操作三张图:lightmapColor,lightmapDir,以及一张ShadowMap 这里只操作前两张: using UnityEngine; using UnityEngine.EventSystems; using UnityEngine.UI;public cl…

C++基础知识(七)之STL算法、智能指针、文件操作、C++异常、断言

二十一、STL算法 STL提供了很多处理容器的函数模板,它们的设计是相同的,有以下特点: 1)用迭代器表示需要处理数据的区间。 2)返回迭代器放置处理数据的结果(如果有结果)。 3)接受…

【Linux】线程概念与控制

线程概念与控制 一.Linux线程概念1.什么是线程?2.分页式存储管理1.虚拟地址和页表的由来2.物理内存管理3.页表4.页目录结构5.两级页表的地址转换6.缺页中断(异常) 3.线程的优点(面试题)4.线程的缺点5.线程异常6.线程用途 二.Linux进程VS线程1.进程和线程2.进程的多个…

电子电路中,正负双电源供电的需求原因

1. 允许信号双向摆动 - **交流信号的处理**:许多电路(如音频放大器、运算放大器)需要处理正负交替变化的交流信号(例如声音信号、传感器输出)。如果仅用单正电源(如12V),信号的“负…

ROS环境搭建

ROS首次搭建环境 注:以下内容都是在已经安装好ros的情况下如何搭建workplace 一、创建工作空间二、创建ROS包三、注意 注:以下内容都是在已经安装好ros的情况下如何搭建workplace 如果没有安装好,建议鱼香ros一步到位:鱼香ROS 我也是装了好久…

java后端开发day26--常用API(一)

(以下内容全部来自上述课程) 1.Math 1.简单介绍 是一个帮助我们用于进行数学计算的工具类私有化构造方法,所有的方法都是静态的 2.常用方法 不要背,忘了就查文档。 3.练习题 1.判断一个数是否为质数(优化版&am…

SpringBoot接口自动化测试实战:从OpenAPI到压力测试全解析

引言:接口测试的必要性 在微服务架构盛行的今天,SpringBoot项目的接口质量直接影响着系统稳定性。本文将分享如何通过自动化工具链实现接口的功能验证与性能压测,使用OpenAPI规范打通测试全流程,让您的接口质量保障体系更加完备。…

Python中文自然语言处理库SnowNLP

SnowNLP 介绍 SnowNLP 是一个基于 Python 的中文自然语言处理库,专为处理中文文本而设计。它受到 TextBlob 的启发,但与 TextBlob 不同的是,SnowNLP 没有使用 NLTK,所有的算法都是自己实现的,并且自带了一些训练好的字…

Linux-计算机网络.udp

1.收发函数: read()/write () ///通用文件读写,可以操作套接字。 recv(,0) /send(,0) ///TCP 常用套机字读写 recvfrom()/sendto() ///UDP 常用套接字读写 ssize_t recv(int sockfd, void *buf, size_t len, …