FFmpeg 4.3 音视频-多路H265监控录放C++开发十八，ffmpeg解复用

🕗 发布于 2024-12-07 07:54 ffmpeg 音视频 c++

为啥要封装和解封装呢？

1.封装就相当于将 h264 和aac 包裹在一起。既能播放声音，也能播放视频

2.在封装的时候没指定编码格式，帧率，时长，等参数；特别是视频，可以将视频帧索引存储，方便视频进度跳转。

解封装过程中使用到的数据结构

解封装过程中使用到的数据结构 AVFormatContext，AVStream ，AVCodecParameters 说明-CSDN博客

代码：

#include <iostream>
#include <thread>
using namespace std;
#define CERR(err) if(err<0){ PrintErr(err);}

extern "C" {
#include "libavformat/avformat.h"
}
#include "xdecoder.h"
#include "xsdl.h"
#include "xvideoview.h"

//在 xcodec.cpp中已经定义了 PrintErr方法，因此这里要删除了
//void PrintErr(int err)
//{
//char buf[1024] = { 0 };
//av_strerror(err, buf, sizeof(buf) - 1);
//cerr << buf << endl;
//}


int main(int argc,char *argv) {

AVPacket* avpacket = av_packet_alloc();
AVFrame* avframe = nullptr;
AVStream* audioavstream = nullptr;
AVStream* videoavstream = nullptr;
int audioavstreamid = -1;
int videoavstreamid = -1;
AVCodecParameters* audioParamter = nullptr;
AVCodecParameters* videoParamter = nullptr;
AVCodecID audioavcodecid = AV_CODEC_ID_NONE;
AVCodecID videoavcodecid = AV_CODEC_ID_NONE;
AVCodecContext* videoavcodecContext = nullptr;

XDecoder xdecode;

XVideoView* xvideoview = nullptr;

///hunandede
cout << "aaa" << endl;
int ret = 0;
//const char* url = "2_audio_track_5s.mp4";
//const char* url = "1920_1080_25.mp4";
const char* url = "400_300_25.mp4";

AVFormatContext* avformatContext = nullptr;
//avformatContext = avformat_alloc_context();
// 如果通过 avformat_alloc_context方法创建 avformatContext，则需要通过avformat_free_context释放。
//avformat_free_context(avformatContext);

ret = avformat_open_input(&avformatContext, url, nullptr, nullptr);
if (ret <0) {
cout << "func avformat_open_input error " << endl;

CERR(ret);
goto END;
}

ret = avformat_find_stream_info(avformatContext,nullptr);
if (ret < 0) {
cout << "func avformat_find_stream_info error " << endl;

CERR(ret);
goto END;
}

av_dump_format(avformatContext, -1, url, 0);

//循环找到音频和视频
for (int i = 0; i < avformatContext->nb_streams; ++i) {
if (avformatContext->streams[i]->codecpar->codec_type == AVMediaType::AVMEDIA_TYPE_AUDIO) {
audioavstreamid = i;
audioavstream = avformatContext->streams[i];
audioParamter = avformatContext->streams[i]->codecpar;
continue;
}
if (avformatContext->streams[i]->codecpar->codec_type == AVMediaType::AVMEDIA_TYPE_VIDEO) {
videoavstreamid = i;
videoavstream = avformatContext->streams[i];
videoParamter = avformatContext->streams[i]->codecpar;
}
}
cout << "audioavstreamid = " << audioavstreamid << " audioavstream = " << audioavstream << " audioavstream->codecpar->bit_rate = " << audioavstream->codecpar->bit_rate << endl;
cout << "videoavstreamid = " << videoavstreamid << " videoavstream = " << videoavstream << " videoavstream->codecpar->width = " << videoavstream->codecpar->width << endl;
cout << "videoavstream->id = " << videoavstream->id << endl;
cout << "videoavstream->index = " << videoavstream->index << endl;

cout << "audioavstream->id = " << audioavstream->id << endl;

cout << "audioavstream->index = " << audioavstream->index << endl;


//记住音频和视频的 avcodecId
if (audioavstream) {
audioavcodecid = audioavstream->codecpar->codec_id;
//音频的信息先放在这里， 后续实现对于 音频的avpacket的处理
}
if (videoavstream) {
videoavcodecid = videoavstream->codecpar->codec_id;
//使用视频的 avcodecid，来创建 解码器上下文，并使用avcodec_parameters_to_context将videoavcodecContext的参数 配置为 videoavstream的参数
videoavcodecContext = xdecode.Create(videoavcodecid, false);
avcodec_parameters_to_context(videoavcodecContext, videoavstream->codecpar);
xdecode.SetAVCodecContext(videoavcodecContext);
bool xdecodeopen = xdecode.Open();
if (!xdecodeopen) {
cout << "func xdecode.Open error "  << endl;
goto END;
}
avframe = xdecode.CreateFrame();
if (avframe==nullptr) {
cout << "func xdecode.CreateFrame = nullptr"  << endl;
goto END;
}

xvideoview = XVideoView::CreateVideo();
xvideoview->Init(videoParamter->width, 
videoParamter->height, 
(XVideoView::Format)(videoParamter->format), 
nullptr);

}


//从 avformatContext中读取avpacket.

while (true) {
ret = av_read_frame(avformatContext, avpacket);
if (ret <0) {
cout << "av_read_frame error " << endl;
CERR(ret);
//这里失败了，需要 av_packet_unref(avpacket)吗？查看 av_read_frame 源码应该是不用的，但是为了保险，也可以调用一下，但是要判断avpacket是否为nunllptr
if (avpacket !=nullptr) {
av_packet_unref(avpacket);
}
break;
}
else if (ret ==0) {
//cout << "avpacket->pts : " << avpacket->pts << endl;
//this_thread::sleep_for(100ms); //这里开始自己的想法是在这里打个断点，debug时，检查内存是否增长。但是有断点的情况下，明显有内存泄漏的情况下，并没有内存增长的情况，这说明通过debug的方式
cout << "avpacket->pts : " << avpacket->pts << endl;
cout << "avpacket->stream_index : " << avpacket->stream_index << endl;

//这里有可以使用avpacket了，这个avpacket有可能是音频的avpacket，也有可能是视频的avpacket，要先判断一下
if (videoavstream && avpacket->stream_index == videoavstreamid) {
//说明是视频的avpacket
bool xdecodeSendAVPacketSuccess = xdecode.DecoderSendAVPacket(avpacket);
if (!xdecodeSendAVPacketSuccess) {
cout << "xdecode.DecoderSendAVPacket = " << xdecodeSendAVPacketSuccess << endl;
//如果没有成功则continue，让继续从avformatContext 读取数据
continue;
}
else {
//发送成功了，这时候就可以从xdecode中获得avframe了,注意的是：发送一次avpacket，可能有多个avframe被弄出来
while (xdecode.DecoderRecvAVFrame(avframe)) {
//成功的从 xdecode 中获得了 avframe
this_thread::sleep_for(100ms);
xvideoview->DrawAVFrame(avframe);
}
}
}


//再使用完毕avpacket之后，记得一定要av_packet_unref，不然会有内存泄漏
av_packet_unref(avpacket);
}
}


END:
if (videoavstream) {
xdecode.SetAVCodecContext(nullptr);
}
if(xvideoview) {
xvideoview->DestoryVideoAudio();
}
av_frame_free(&avframe);
av_packet_free(&avpacket);
avformat_close_input(&avformatContext);
return ret;
}

原文地址：https://blog.csdn.net/hunandede/article/details/144199518

免责声明：本站文章内容转载自网络资源，如本站内容侵犯了原著者的合法权益，可联系本站删除。更多内容请关注自学内容网（zxcms.com）！

上一篇：Ubuntu22.04深度学习环境安装【cuda+cudnn】
下一篇：如何发布及管理npm包

.NET(C#) 如何配置用户首选项及保存用户设置
.NET(C#) 如何配置用户首选项及保存用户设置
阅读更多2024-12-14
【最新】北大数字普惠金融指数数据集-省市县（2011-2023年）
郭峰,王靖一,王芳,孔涛,张勋,程志云.测度中国数字普惠金融发展:指数编制与空间特征[J].经济学(季刊),2020,19(04):1401-1418.时间跨度：省级和城市级指数时间跨度为2011-2
阅读更多2024-12-14
GESP202412 四级【Recamán】题解（AC）
a11ak−1−kkakak−1−kak−1k小杨想知道 Recamán 数列的前n项从小到大排序后的结果。手动计算非常困难，小杨希望你能帮他解决这个问题。
阅读更多2024-12-14
IDEA遇到EasyConnect中的网络资源无法访问的问题
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。原文链接：https://blog.csdn.net/wanshanyu_/article/de
阅读更多2024-12-14
双目摄像头标定方法
此时已经完成标定，左下角为反投影误差，右边为外参可视化。将双目左右目拍的图像上传（左右目最好不少于20张）此时回到主页面，即可看到成功导出。把这些误差大的删除即可。
阅读更多2024-12-14
Servlet、omcat服务器架构与工作原理
Servlet是运行在服务器端的Java程序，它的主要职责之一是接收并处理来自客户端（如浏览器）的HTTP请求。当客户端发送一个请求到服务器时，Servlet可以解析请求中的信息，例如请求的URL路径
阅读更多2024-12-14
Vue生命周期钩子函数：深入解析与实践
作为高级Vue前端开发人员，对Vue组件的生命周期钩子函数有着深刻的理解是至关重要的。生命周期钩子函数是指在Vue组件的创建、更新、销毁等过程中，Vue自动调用的一系列方法。通过这些钩子函数，我们可以
阅读更多2024-12-14
安卓开发--使用android studio发布APP
app发布
阅读更多2024-12-14
数据结构与算法学习笔记----拓扑排序
@ author: 明月清了个风。
阅读更多2024-12-14
python 将数据保存到现有的Excel文件的新工作表
out_file = ‘query.xlsx’df1 = pd.DataFrame(out_data)若直接写入：df1.to_excel(out_file, index=False, sheet_n
阅读更多2024-12-14

FFmpeg 4.3 音视频-多路H265监控录放C++开发十八，ffmpeg解复用

为啥要封装和解封装呢？

解封装流程以及相关的API

解封装过程中使用到的数据结构

代码：

相关文章