• Home
  • Line#
  • Scopes#
  • Navigate#
  • Raw
  • Download
1### 3.1.1 Sensor至MIPI的媒体通路
2
3海思媒体处理平台主要分为视频输入(VI)、视频处理(VPSS)、视频编码(VENC)、视频解码(VDEC)、视频输出(VO)、视频拼接(AVS)、音频输入(AI)、音频输出(AO)、音频编码(AENC)、音频解码(ADEC)、区域管理(REGION)等模块。本章以Taurus套件为例,详细介绍Sensor至MIPI屏的整个视频通路实现方式,其主要处理流程如下图所示:
4
5![](./figures/hispark_taurus_helloworld_sample/001sensor%E5%88%B0mipi%E7%9A%84%E5%AA%92%E4%BD%93%E9%80%9A%E8%B7%AF.png)
6
7针对海思媒体处理平台涉及的关键术语作如下解释:
8
9* VI模块捕获视频图像,可对其做剪切、去噪等处理,并输出多路不同分辨率的图像数据。
10* 解码模块对编码后的视频码流进行解码,并将解析后的图像数据送VPSS进行图像处理,再送VO显示。可对H.265/H.264/JPEG格式的视频码流进行解码。
11* VPSS模块接收VI和解码模块发送过来的图像,可对图像进行图像增强、锐化等处理,并实现同源输出多路不同分辨率的图像数据用于编码、预览或抓拍。
12* 编码模块接收VI捕获并经VPSS处理后输出的图像数据,可叠加用户通过Region模块设置的OSD图像,然后按不用协议进行编码并输出相应码流。
13* VO模块接收VPSS处理后的输出图像,可进行播放控制等处理,最后按用户配置的输出协议输出给外围视频设备。
14* AVS接收多路采集的图像,进行拼接合成全景图像。
15* AI模块捕获音频数据,然后AENC模块支持多种音频协议对其进行编码,最后输出音频码流。
16* 用户从网络或者外围存储设备获取的音频码流可直接送给ADEC模块,ADEC支持解码多种不同的音频格式码流,解码后数据送给AO模块即可播放声音。
17