nvdec与vaapi与vdpau的关系

news2024/7/3 15:12:46

nvdec/vaapi/vdpau的关系

NVDEC：nvidia video decoder。

英伟达官网中有关video codec SDK的介绍，其中有头文件、开发API文档等。

Nvidia Video SDK中提供了NVDEC、NVENC，其中NVDEC以前也叫做NVCUVID（不知道NVDEC的开发API中很多都已cuvid开头的函数是不是因为之前从NVCUVID转变而来的）。之前NVDEC是随着cuda toolkit一起发布的，现在是随着Nvidia codec SDK打包发布。

1.1 VDPAU与NVDEC

NVDEC作为一种私有API，只被nvidia driver支持。

VDPAU是一种开源API，最初是由Nvidia开发的用于支持Nvidia PureVideo SIP Block，后来发展为可以被多种GPU支持，所有的支持VDPAU的英伟达显卡列表，AMD Raedon HD4000+支持VDPAU，Intel不支持VDPAU只支持VA-API，不过可以通过libva-va-gl来支持VDPAU中使用Intel的VA-API，Mesa通过Gallium3D来支持VDPAU。

generic VDPAU drivers

也有drivers是支持VDPAU转VA-API的，特别是对于部分Intel显卡来说，其可能只支持VA-API，此时如果应用只支持VDPAU，则就需要VDPAU–>VA-API的转换驱动。我这里的GTX 1050Ti其实就同时支持VDPAU和NVDEC，两种方式我尝试了下，都能正确的解码视频。

mesa Gallium3D

mesa的gallium3D模块是旨为简化3D图像设备编程API接口的适用于多种操作系统、rendering或者video加速API的一系列接口和库，它是开源的。

gallium3D模块的前端frontends中就包含了多种加速接口，比如va和vdpau。

mesa中现在va和vdpau主要支持的是，【va】：r600，radeonsi，nouveau，virtio_gpu，d3d12；【vdpau】：r600，radeonsi，nouveau，virtio_gpu，d3d12。从这里也可以看出，linux虚机中的va和vdpau都是通过virtio_gpu下发到host主机上的，而host上virglrenderer中目前只支持libva接口的处理，所以host主机上就需要VA-API转VDPAU或者VA-API转NVDEC的各种驱动以便适配不同厂家的显卡（intel/amd/nvidia)等。

1.2 NVDEC驱动

厂家驱动

NVDEC由nvidia官方驱动中包含了，可以通过安装NVIDIA-Linu-xxx.run来安装，nvidia-smi查看其信息，其中应该同时也安装了cuda驱动。

VAAPI转NVDEC驱动

vaapi转vdpau驱动

原本有个库 libva-vdpau-driver 是实现VA-API到VDPAU的转换，不过该软件有点老了，还停留在2012年，而且该软件的ubuntu deb包被ubuntu之前给遗弃了，所以ubuntu22.04中用apt search搜不到该包，据说要到ubuntu23之后还会加进来。

不顾可以直接安装vdpau-va-dirver_0.7.4-7_amd64.deb包，安装完会出现vdpau_drv_video.so，目前测试了下，vainfo是可以通过vdpau去获取到profile和entrypoints的。但是我在用vdpau启动虚拟机时，虚机coredump了。虚机就没启动的了。待分析排查。
在这里插入图片描述

vaapi转nvdec驱动

elFarto这家伙发了帖子问，2018年libva中准备遗弃GLX，转用EGL/dm-buf方式，不过那时候NVIDIA驱动中并不支持EGL，所以就会出现vdpau实际不可用了，而当时Linux的app中基本都不支持NVDEC，比如firefox等，所以就出先那些只支持VA-API的Linux应用无法使用Nvidia显卡做video硬件加速。参考这个帖子。

后来，elFarto自己写了个 nvidia-vaapi-driver ，专门给Firefox通过VA-API使用NVDEC加速的。

不过其实该仓库取名应该是nvdec-vaapi-driver 更合适，毕竟它的功能只是将VA-API转NVDEC。我也试过了，安装之后，会出现nvidia_vidoe_drv.so，通过vainfo可以正确获取profiles和entrypoints。

请添加图片描述