以下内容源于朱有鹏嵌入式课程的学习与整理,如有侵权请告知删除。
前言
本文将详细介绍博文第二季3:sample_venc.c的整体分析提及的“配置视频捕获”。
该部分主要涉及以下步骤:
- 5、配置MIPI
- 6、初始化ISP
- 7、运行ISP线程
- 8、配置开启VI 设备捕获
- 9、配置开启VI 通道捕获
在分析方法上,我们首先绘制VI部分的调用图谱,然后重点讲述VI部分的Sensor操作和ISP模块的程序细节,接着讲述VI部分宽动态和dev、chn等相关概念。在学习效果上,要把控整个过程,掌握一些新的概念和对应的数据结构,理解关键操作在哪里定义与设置,将来需要修改的时候能找到地方。
一、VI部分的函数调用图谱
绘制的图谱见链接,截图如下:
SAMPLE_COMM_VI_StartVi
IsSensorInput
SAMPLE_COMM_VI_StartIspAndVi
step1:SAMPLE_COMM_VI_StartMIPI
SAMPLE_COMM_VI_SetMipiAttr
step2:SAMPLE_COMM_ISP_Init
sensor_register_callback//…………具体介绍在第4季4篇章。
HI_MPI_AE_Register
HI_MPI_AWB_Register
HI_MPI_AF_Register
HI_MPI_ISP_MemInit
HI_MPI_ISP_SetWDRMode
HI_MPI_ISP_SetPubAttr
HI_MPI_ISP_Init
step3:SAMPLE_COMM_ISP_Run
HI_MPI_ISP_Run
step4:SAMPLE_COMM_VI_StartDev
HI_MPI_VI_SetDevAttr
HI_MPI_ISP_GetWDRMode
HI_MPI_VI_SetWDRAttr
HI_MPI_VI_EnableDev
step5:SAMPLE_COMM_VI_StartChn
HI_MPI_VI_SetChnAttr
HI_MPI_VI_SetRotate
HI_MPI_VI_EnableChn
二、VI部分详解
1、step3代码的整体分析
/******************************************
step 3: start vi dev & chn to capture
******************************************/
stViConfig.enViMode = SENSOR_TYPE;//sensor的类型定义在Makefile.param文件中
stViConfig.enRotate = ROTATE_NONE;
stViConfig.enNorm = VIDEO_ENCODING_MODE_AUTO;
stViConfig.enViChnSet = VI_CHN_SET_NORMAL;
s32Ret = SAMPLE_COMM_VI_StartVi(&stViConfig);
if (HI_SUCCESS != s32Ret)
{
SAMPLE_PRT("start vi failed!\n");
goto END_VENC_MJPEG_JPEG_1;
}
stViConfig这个变量对应的结构体类型是SAMPLE_VI_CONFIG_S。其成员enViMode表示摄像头sensor的种类,不同sensor有着不同的分辨率和帧率;enRotate表示是否选择图像;enNorm表示视频信号制式;enViChnSet表示是否将图像flip或者mirror。具体内容见博客:第二季4:MPP模块的初始化(step1和step2)中第一节“分析参数的含义”。
2、SAMPLE_COMM_VI_StartVi函数解析
该函数位于mpp/sample/common/sample_comm_venc.c文件中。
HI_S32 SAMPLE_COMM_VI_StartVi(SAMPLE_VI_CONFIG_S* pstViConfig)
{
HI_S32 s32Ret = HI_SUCCESS;
SAMPLE_VI_MODE_E enViMode;
if(!pstViConfig)
{
SAMPLE_PRT("%s: null ptr\n", __FUNCTION__);
return HI_FAILURE;
}
enViMode = pstViConfig->enViMode;
if(!IsSensorInput(enViMode))//此处不是sensor输入的
{
s32Ret = SAMPLE_COMM_VI_StartBT656(pstViConfig);
}
else//此处是sensor输入的,我们分析这个路线
{
s32Ret = SAMPLE_COMM_VI_StartIspAndVi(pstViConfig);
}
return s32Ret;
}
IsSensorInput函数内部通过传参是否某个具体sensor,来判断是否为sensor输入。
SAMPLE_COMM_VI_StartIspAndVi函数是真正开启ISP和VI的函数。
3、SAMPLE_COMM_VI_StartIspAndVi函数解析
(1)VI部分包含三大内容:和Sensor对接的部分,ISP,VI dev和channel。其中ISP是“ image signal process ”的缩写,即图像信号处理。HI3518E内部集成了ISP硬件单元,这个ISP单元在功能上隶属于VI模块。
(2)Hi3518E的硬件单元功能框图、VI 通道功能框图
Hi3518E芯片只有一个 VI 设备,即 Dev0。Dev0 支持BT.656、BT.601、DC、MIPI Rx(MIPI、LVDS、HISPI 接口)输入。
Hi3518E硬件单元仅包含 1 个 VI 视频物理通道,即 Chn0。不存在次通道,但支持扩展通道。Hi3518E物理通道支持的典型分辨率如 720p@30、1080p@30。扩展通道是物理通道的扩展,主要实现缩放功能,其数据来源于物理通道。Hi3518E最多支持 16 个扩展通道。
Hi3518E VI 的物理通道与所对应的设备固定绑定,不允许改变它们的绑定关系。
(3)函数代码如下:
HI_S32 SAMPLE_COMM_VI_StartIspAndVi(SAMPLE_VI_CONFIG_S* pstViConfig)
{
HI_S32 i, s32Ret = HI_SUCCESS;
VI_DEV ViDev;
VI_CHN ViChn;
HI_U32 u32DevNum = 1;
HI_U32 u32ChnNum = 1;
SIZE_S stTargetSize;
RECT_S stCapRect;
SAMPLE_VI_MODE_E enViMode;
if(!pstViConfig)
{
SAMPLE_PRT("%s: null ptr\n", __FUNCTION__);
return HI_FAILURE;
}
enViMode = pstViConfig->enViMode;
/******************************************
step 1: mipi configure
******************************************/
s32Ret = SAMPLE_COMM_VI_StartMIPI(pstViConfig);
if (HI_SUCCESS != s32Ret)
{
SAMPLE_PRT("%s: MIPI init failed!\n", __FUNCTION__);
return HI_FAILURE;
}
/******************************************
step 2: configure sensor and ISP (include WDR mode).
note: you can jump over this step, if you do not use Hi3516A interal isp.
******************************************/
s32Ret = SAMPLE_COMM_ISP_Init(pstViConfig->enWDRMode);
if (HI_SUCCESS != s32Ret)
{
SAMPLE_PRT("%s: Sensor init failed!\n", __FUNCTION__);
return HI_FAILURE;
}
/******************************************
step 3: run isp thread
note: you can jump over this step, if you do not use Hi3516A interal isp.
******************************************/
s32Ret = SAMPLE_COMM_ISP_Run();
if (HI_SUCCESS != s32Ret)
{
SAMPLE_PRT("%s: ISP init failed!\n", __FUNCTION__);
/* disable videv */
return HI_FAILURE;
}
/******************************************************
step 4 : config & start vicap dev
******************************************************/
for (i = 0; i < u32DevNum; i++)
{
ViDev = i;
s32Ret = SAMPLE_COMM_VI_StartDev(ViDev, enViMode);
if (HI_SUCCESS != s32Ret)
{
SAMPLE_PRT("%s: start vi dev[%d] failed!\n", __FUNCTION__, i);
return HI_FAILURE;
}
}
/******************************************************
* Step 5: config & start vicap chn (max 1)
******************************************************/
for (i = 0; i < u32ChnNum; i++)
{
ViChn = i;
stCapRect.s32X = 0;
stCapRect.s32Y = 0;
switch (enViMode)
{
case APTINA_9M034_DC_720P_30FPS:
case APTINA_AR0130_DC_720P_30FPS:
case SONY_IMX222_DC_720P_30FPS:
case OMNIVISION_OV9712_DC_720P_30FPS:
case OMNIVISION_OV9732_DC_720P_30FPS:
case OMNIVISION_OV9750_MIPI_720P_30FPS:
case OMNIVISION_OV9752_MIPI_720P_30FPS:
stCapRect.u32Width = 1280;
stCapRect.u32Height = 720;
break;
case SONY_IMX222_DC_1080P_30FPS:
case APTINA_AR0230_HISPI_1080P_30FPS:
case PANASONIC_MN34222_MIPI_1080P_30FPS:
case OMNIVISION_OV2718_MIPI_1080P_25FPS:
stCapRect.u32Width = 1920;
stCapRect.u32Height = 1080;
break;
default:
stCapRect.u32Width = 1920;
stCapRect.u32Height = 1080;
break;
}
stTargetSize.u32Width = stCapRect.u32Width;
stTargetSize.u32Height = stCapRect.u32Height;
s32Ret = SAMPLE_COMM_VI_StartChn(ViChn, &stCapRect, &stTargetSize, pstViConfig);
if (HI_SUCCESS != s32Ret)
{
SAMPLE_COMM_ISP_Stop();
return HI_FAILURE;
}
}
return s32Ret;
}
关于里面函数的介绍,见函数调用图谱。