简介

获取视频数据

ISP系统控制

系统控制部分用于注册3A算法、注册Sensor驱动、初始化ISP firmware、运行ISP firmware、退出ISP firmware、配置ISP属性等功能。

MIPI Rx ioctl命令字

MIPI Rx是一个支持多种差分视频输入接口的采集单元，通过combo-PHY接收MIPI/LVDS/sub-LVDS/HiSPi接口的数据，通过不同的功能模式配置，MIPI Rx可以支持多种速度和分辨率的数据传输需求，支持多种外部输入设备。

VI（Vedio Input）

VI模块捕获视频图像，可对其做裁剪、防抖、颜色优化、亮度优化、噪声去除等处理，并输出YUV或RAW格式的图像数据。

展示视频数据

VO（Vedio Output）

VO模块接收VPSS处理后的输出图像，可进行播放控制等处理，最后按用户配置的输出协议输出给外围视频设备。

HDMI（High Definition Multimedia Interfac）

HDMI是全数字化影像和声音发送接口，可以发送未压缩的音频及视频信号。

图像/视频数据处理

VPSS（Video Process Sub-System）

VPSS模块支持对输入图像进行统一预处理，如去噪、去隔行、裁剪等，然后再对各通道分别进行处理，如缩放、加边框等。

AIPP（Artificial Intelligence Pre-Processing）

AIPP（Artificial Intelligence Pre-Processing）人工智能预处理，在AI Core上完成数据预处理，主要功能包括改变图像尺寸（抠图、填充等）、色域转换（转换图像格式）、减均值/乘系数（改变图像像素）等。

DVPP（Digital Vision Pre-Processing）

DVPP（Digital Vision Pre-Processing）是昇腾AI处理器内置的图像处理单元，通过AscendCL媒体数据处理接口提供强大的媒体处理硬加速能力，主要功能包括以下功能：

• VPC（Vision Preprocessing Core）：处理YUV、RGB等格式的图片，包括缩放、抠图、图像金字塔、色域转换等。
• JPEGD（JPEG Decoder）：JPEG压缩格式-->YUV格式的图片解码。
• JPEGE（JPEG Encoder）：YUV格式-->JPEG压缩格式的图片编码。
• VDEC（Video Decoder）：H264/H265格式-->YUV/RGB格式的视频码流解码。
• VENC（Video Encoder）：YUV420SP格式-->H264/H265格式的视频码流编码。
• PNGD（PNG Decoder）：PNG格式-->RGB格式的图片解码。

音频数据获取和输出

AI（Audio Input）

AI模块捕获音频数据 。

AO（Audio Output）

通过ADEC模块解码后的音频数据，AO模块支持播放其音频。