【海思SS528 | VDEC】MPP媒体处理软件V5.0 | 视频解码模块——学习笔记

😁博客主页😁:🚀https://blog.csdn.net/wkd_007🚀
🤑博客内容🤑:🍭嵌入式开发、Linux、C语言、C++、数据结构、音视频🍭
🤣本文内容🤣:🍭介绍🍭
😎金句分享😎:🍭你不能选择最好的,但最好的会来选择你——泰戈尔🍭

目录

  • 🎄一、概述
    • ✨1.1 VDEC模块
    • ✨1.2 什么是视频解码
  • 🎄二、码流发送方式
    • ✨ 2.1 流式发送(OT_VDEC_SEND_MODE_STREAM)
    • ✨ 2.2 按帧发送(OT_VDEC_SEND_MODE_FRAME)
    • ✨ 2.3 按兼容模式发送(OT_VDEC_SEND_MODE_COMPAT)
  • 🎄三、时间戳(PTS)处理
  • 🎄四、用户图片
  • 🎄五、解码帧存分配方式
  • 🎄六、总结


在这里插入图片描述

🎄一、概述

✨1.1 VDEC模块

海思平台的视频解码是硬件解码。VDEC模块提供驱动视频解码硬件工作的MPI接口,实现视频解码功能。
硬件解码模块有VDH、JPEGD,可支持解码协议有:H.264/H.265JPEG/MJPEG
VDEC模块支持解码最大通道数为128个,支持的最大最小分辨率分别为:

  • H.264/H.265:max 8192x8192, min 96x96;
  • JPEG/MJPEG:max 16384x16384,min 8x8。

本文涉及到的SDK文档:《MPP媒体处理软件V5.0》

✨1.2 什么是视频解码

一段连续的视频是由一张张画面组成的,每一张的画面称为一帧。一秒钟的画面总数称为帧率。
由于完整地保存视频的每一帧画面会使得数据量很大,不利于传输和保存。所以人们就把视频进行压缩编码。
常见的编码有:H.264/H.265JPEG/MJPEG
将视频编码数据(H.264/H.265JPEG/MJPEG)解析成YUV格式或RGB格式的数据的整个过程就是视频解码。


在这里插入图片描述

🎄二、码流发送方式

码流发送方式决定了我们怎样将编码帧发送给VDEC模块,VDEC模块一共提供了三种方式:

✨ 2.1 流式发送(OT_VDEC_SEND_MODE_STREAM)

用户每次可发送任意长度码流到解码器,由解码器内部完成一帧码流的识别过程

  • 优点:不需自己检查帧的开始、结束;
  • 缺点:不能希望马上开始解码图像,也就是解码可能会稍微延时。

✨ 2.2 按帧发送(OT_VDEC_SEND_MODE_FRAME)

用户每次发送完整一帧码流到解码器,每调用一次发送接口,解码器就认为该帧码流已经结束,开始解码图像,因此需保证每次调用发送接口发送的码流必须为一帧,否则会出现解码错误。

  • 优点:可以达到快速解码的目的;
  • 缺点:需要自己判断是否为完整的编码帧,要等一帧完整数据才可发送。

✨ 2.3 按兼容模式发送(OT_VDEC_SEND_MODE_COMPAT)

支持一帧码流分多次发送给解码器,但是每帧码流结束时必须配置帧结束标志end_of_frame为TD_TRUE,否则认为当前帧码流还未结束。

  • 优点:不需要等到一帧数据都到了才发送。
  • 缺点:需要自己判断是否编码帧结束。

在这里插入图片描述

🎄三、时间戳(PTS)处理

在模式OT_VDEC_SEND_MODE_FRAME下发送码流时,解码输出的图像时间戳PTS为发送码流接口(ss_mpi_vdec_send_stream)中用户送入的PTS,解码器不会更改此值;

如果用户配置的PTS值为0,则表示用户不进行帧率控制,而是由视频输出模块( VO)进行帧率控制;

当VDEC为回放模式且VPSS为AUTO模式时,如果用户送入的PTS值为-1,则表示此图像不会被视频输出模块( VO)显示;

如果是其他值,则表示视频输出模块( VO)根据用户设置的PTS值进行帧率控制。

注意:不能出现PTS值为0和非0混合的情况。


在这里插入图片描述

🎄四、用户图片

如果出现没有视频流发送给解码器了,这时解码器允许用户设置一帧图像,来表示当前没有新的视频帧。

当网络异常断开,前端没有码流送来时,用户可通过设置插入用户图片显示在VO上,以提示当前网络异常或没有码流可解码。 VDEC提供两种插入用户图片方式:

  • 立刻插入用户图片: VDEC会先清空解码器内部的码流和图像,然后插入用户
    图片。
  • 延迟插入用户图片: VDEC会先把解码器内部的码流全部解完,待解码图像全
    部输出之后再插入用户图片。

在这里插入图片描述

🎄五、解码帧存分配方式

  • 解码ModuleVB池:OT_VB_SRC_MOD
    创建解码通道时不分配图像Buffer,而是由用户调用相应的MPI接口创建专属于解码模块的ModuleVB池,该VB池只允许VDEC获取VB块,其它模块只能使用不能获取。
  • 解码PrivateVB池:OT_VB_SRC_PRIVATE
    创建解码通道时由VDEC创建私有VB池作为该通道的图像Buffer,用户可以在创建通道接口ss_mpi_vdec_create_chn中设置私有VB池的个数frame_buf_cnt和VB块的大小frame_buf_size
  • 解码UserVB池:OT_VB_SRC_USER
    创建解码通道时不分配图像Buffer,而是由用户调用接口ss_mpi_vb_create_pool创建一个视频缓存VB池,再通过调用接口ss_mpi_vdec_attach_vb_pool把某个解码通道绑定到固定的视频缓存VB池中。

三种解码帧存分配方式可通过接口ss_mpi_vdec_set_mod_param的参数vb_src来设置。当解码帧存使用ModuleVB池或者UserVB池方式时,可以不用销毁解码通道直接销毁VB池,但是销毁解码VB池前用户必须保证没有任何模块正在使用这个VB池里的任何一块VB(可通过复位解码通道,以及复位解码直接绑定的后级模块实现,如VDEC绑定VPSS,则就要同时复位VDEC和VPSS;如果用户是从VDEC里获取图像上去,也必须保证全部图像释放回VDEC。),否则会出现程序异常的情况。

在这里插入图片描述

🎄六、总结

本文记录海思SS528 的 VDEC 模块的一些基础知识,用于日后复习。
在这里插入图片描述
如果文章有帮助的话,点赞👍、收藏⭐,支持一波,谢谢 😁😁😁

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/202006.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

vue3实现元素拖拽移动功能

效果图 实现拖拽移动 首先我们给需要实现功能的元素加一个draggable"true"让元素能够被拖拽 先来认识两个搭配draggable属性一起使用的事件——ondragstart和ondragend,它们的定义分别为: ①. ondragstart 事件在用户开始拖动元素或选择的文…

Spring-AOP与声明式事务

为什么要用AOP ①现有代码缺陷 针对带日志功能的实现类,我们发现有如下缺陷: 对核心业务功能有干扰,导致程序员在开发核心业务功能时分散了精力 附加功能分散在各个业务功能方法中,不利于统一维护 ②解决思路 解决这两个问题&…

使用STM32 HAL库驱动烟雾传感器的设计和优化

STM32 HAL库是STMicroelectronics提供的针对STM32系列微控制器的一套硬件抽象层库,可以简化开发过程并提供对各种外设的支持。本文将介绍如何使用STM32 HAL库来驱动烟雾传感器,并对传感器数据采集和处理进行优化。将包括HAL库的初始化、模拟信号采集、数…

el-select实现分屏效果

动态绑定class值 &#xff0c;多种判断 :class"type 8 ? home-stye-2 : type 24 ? home-stye-1 : home-stye-3" <div class"home-right-top"><div class"home-right-top-video"><el-row :gutter"20"><el-c…

微服务中配置Nacos热更新

启动Nacos startup.cmd -m standalone 在IDE中启动服务 打开nacos管理后台并选择配置列表 创建配置(这里以日期格式为例) 因为这里配置的是userservice的服务,所以在userservice服务的pom文件中引入依赖 配置一个bootstrap.yml文件 注意这里bootstrap文件中配置过的内容,在app…

linux下实现Qt程序实现开机自启动

1.原理 要想实现开机自启动&#xff0c;首先&#xff0c;QT是没有这种实现的&#xff0c;最好是靠电脑开机的启动目录启动软件&#xff0c;下面这个目录 /etc/xdg/autostart 这是操作系统中用于配置启动项的目录&#xff0c;该目录下存放着开机自启动的启动器(.desktop)文件…

Oracle--索引

文章目录 一、索引是什么?二、索引的原理三、索引的特征四、创建索引的方式五、怎么确认索引六、案列七、复合索引 一、索引是什么? 索引&#xff08;INDEX&#xff09;是数据库中用于提高查询效率的一种数据结构。它可以加速数据库表的数据查找、过滤和排序等操作。索引是一…

网络通信与TCP.IP协议

网络通信与TCP.IP协议 URI 用字符串标识某一互联网资源&#xff0c;而 URL 表示资源的地点&#xff08;互联网上所处的位置&#xff09;。可见 URL 是 URI 的子集 URL (Uniform Resource Locator)&#xff0c;统一资源定位符 &#xff0c;用于描述一个网络上的资源 DNS: &#…

C# 友元程序集

1.友元程序集 使用友元程序集可以将internal成员提供给其他的友元程序集访问。 程序集FriendTest1.dll [assembly:InternalsVisibleTo("FriendTest2")] namespace FriendTest1 {internal class Friend{string name;public string Name > name;public Friend(str…

Android修行手册 - 一篇文章从0到1搞一个Android Studio插件。

Unity3D特效百例案例项目实战源码Android-Unity实战问题汇总游戏脚本-辅助自动化Android控件全解手册再战Android系列Scratch编程案例软考全系列Unity3D学习专栏蓝桥系列ChatGPT和AIGC &#x1f449;关于作者 专注于Android/Unity和各种游戏开发技巧&#xff0c;以及各种资源分…

更改AndroidStudio模拟器位置

C盘何等的珍贵&#xff0c;可是好多工具&#xff0c;软件非得默认安装在C盘。。导致C盘越来越紧张。。 在日常使用过程中&#xff0c;安装任何软件都会将其安装到非系统盘下&#xff0c;Android模拟器也不能例外。保护好C盘也是日常一个良好的习惯。 Android AVD默认路径&…

数据挖掘 感知机

要使用感知机&#xff0c;我们首先要引入头文件&#xff0c;以下是感知机用的到头文件&#xff1a; import pandas as pd import numpy as np import matplotlib.pyplot as plt from sklearn.linear_model import Perceptron from sklearn.model_selection import train_test_…

淘宝商品详情数据接口(店铺搬家、数据分析、代购商城、ERP选品、无货源铺货、品牌监控)

使用淘宝API接口需要以下步骤&#xff1a; 注册开发者账号&#xff1a;在淘宝开放平台&#xff08;https://o0b.cn/anzexi&#xff09;上注册一个开发者账号&#xff0c;并创建一个应用。 获取API密钥&#xff1a;在应用页面上获取API密钥&#xff0c;这是后续调用API接口的凭…

渲染到纹理:原理及WebGL实现

这篇文章是WebGL系列的延续。 第一个是从基础知识开始的&#xff0c;上一个是向纹理提供数据。 如果你还没有阅读过这些内容&#xff0c;请先查看它们。 NSDT在线工具推荐&#xff1a; Three.js AI纹理开发包 - YOLO合成数据生成器 - GLTF/GLB在线编辑 - 3D模型格式在线转换 - …

Vue修改密码功能的源代码

基本需求 输入框不能为空 旧密码表单提交时必须正确 两次输入新密码一致 限定新密码的复杂度&#xff0c;这里是长度在 6 到 20 个字符 <template><el-form ref"form" :model"user" :rules"rules" label-width"80px"><…

线性表——(2)线性表的顺序存储及其运算的实现

归纳编程学习的感悟&#xff0c; 记录奋斗路上的点滴&#xff0c; 希望能帮到一样刻苦的你&#xff01; 如有不足欢迎指正&#xff01; 共同学习交流&#xff01; &#x1f30e;欢迎各位→点赞 &#x1f44d; 收藏⭐ 留言​&#x1f4dd; 看到美好&#xff0c;感受美好&a…

ucharts中,当数据为0时,不显示

当为0时&#xff0c;会显示出来&#xff0c;值比较小的时候&#xff0c;数据会显示在一起&#xff0c;不美观 期望效果&#xff1a; 实现步骤&#xff1a; 我是将uCharts插件下载导入到src/uni_modules下的 1、修改src/uni_modules/qiun-data-charts/js_sdk/u-charts/confi…

数据结构day4作业

1.单链表任意位置删除 datetype pos;printf("please input pos");scanf("%d",&pos);headdelete_all(head,pos);Output(head);Linklist delete_all(Linklist head,datetype pos) {if(pos<1||pos>length(head)||headNULL)return head;if(head->…

Spring boot命令执行 (CVE-2022-22947)漏洞复现和相关利用工具

Spring boot命令执行 (CVE-2022-22947)漏洞复现和相关利用工具 名称: spring 命令执行 (CVE-2022-22947) 描述: Spring Cloud Gateway是Spring中的一个API网关。其3.1.0及3.0.6版本&#xff08;包含&#xff09;以前存在一处SpEL表达式注入漏洞&#xff0c;当攻击者可以访问A…

数据结构 / day06 作业

1.下面的代码打印在屏幕上的值是多少? /下面的代码打印在屏幕上的值是多少?#include "stdio.h"int compute_data(int arr[], unsigned int len) {long long int result 0;if(result len)return arr[0];resultcompute_data(arr,--len);printf("len%d, res…