FFMPEG Qt视频播放器

• 本文是根据PaintEvent事件处理函数不停在组件中绘制视频帧数据

做过图像界面开发的都知道，任何耗时的操作都不能放在主线程进行，一旦主线程阻塞了，那么体现出来的就是界面卡了。 而我们读取视频和解码视频是一个非常耗时的操作，因此需要另外开辟一个线程来专门做这件事

项目准备工作：

1. 安装和配置Qt；
2. ffmpeg配置
   
   具体步骤读者可以直接百度搜索；

项目具体步骤如下：

1. ffmpeg解码视频文件得到的yuv数据
2. 将yuv数据转为RGB数据
3. 用QImage加载RGB数据
4. 传输至组件
5. PaintEvent函数绘制图像

项目代码实现

• 新建一个线程类，继承自QThread

class VideoPlayer : public QThread


• 在新建的线程类中重载其run函数，把解码耗时操作全部都在run函数里面执行。
  
  解码具体流程如下（引用雷博士博客中的图片，致敬，连接：https://blog.csdn.net/leixiaohua1020/article/details/8652605）
  
  视频解码就是要到视频文件中寻找视频流，找到后对流逐帧解码

代码如下所示

//1 初始化FFMPEG
av_register_all(); //调用了这个才能正常适用编码器和解码器
//2 分配AVFormatContext
AVFormatContext *pFormatCtx = avformat_alloc_context();//FFMPEG所有的操作都要通过这个AVFormatContext来进行
char *file_path = "join.avi";
//3. 打开视频文件
if (avformat_open_input(&pFormatCtx, file_path, NULL, NULL) != 0) {//打开视频文件
qDebug()<<"can't open the file. ";
return ; }
if (avformat_find_stream_info(pFormatCtx, NULL) < 0) {//因为视频文件比较复杂所以打开后还需要读取详细的流信息
qDebug()<<"Could't find stream infomation.";
return ;
}
// 4. 找文件中的视频流
///循环查找视频中包含的流信息，直到找到视频类型的流
///便将其记录下来保存到videoStream变量中
///这里我们现在只处理视频流 音频流先不管他
int videoStream=-1;
qDebug()<<QObject::tr("视频流个数：")<<pFormatCtx->nb_streams;
for (int i = 0; i < pFormatCtx->nb_streams; i++) {
if (pFormatCtx->streams[i]->codec->codec_type == AVMEDIA_TYPE_VIDEO) {
videoStream = i;
}
}
///如果videoStream为说明没有找到视频流
if (videoStream == -1) {
qDebug()<<"Didn't find a video stream.";
return ;
}
//5 根据视频流 打开一个解码器来解码：
///查找解码器
AVCodecContext *pCodecCtx;
AVCodec *pCodec;
pCodecCtx = pFormatCtx->streams[videoStream]->codec;
//5.1 找到视频流相对应的解码器
pCodec = avcodec_find_decoder(pCodecCtx->codec_id);
if (pCodec == NULL) {
qDebug()<<"Codec not found. ";
return ;
}
///5.2 打开解码器
if (avcodec_open2(pCodecCtx, pCodec, NULL) < 0) {
qDebug()<<"Could not open codec.";
return ;}
//6 读取视频
AVFrame *pFrame, *pFrameRGB;
int numBytes; uint8_t *out_buffer;
pFrame = av_frame_alloc();
pFrameRGB = av_frame_alloc();
static struct SwsContext *img_convert_ctx;
//将解码后的YUV数据转换成RGB32
img_convert_ctx = sws_getContext(pCodecCtx->width, pCodecCtx->height,
pCodecCtx->pix_fmt, pCodecCtx->width, pCodecCtx->height,
AV_PIX_FMT_RGB32, SWS_BICUBIC, NULL, NULL, NULL);
numBytes = avpicture_get_size(AV_PIX_FMT_RGB32, pCodecCtx->width,pCodecCtx->height);
out_buffer = (uint8_t *)av_malloc(numBytes * sizeof(uint8_t));
avpicture_fill((AVPicture *) pFrameRGB, out_buffer, AV_PIX_FMT_RGB32,
pCodecCtx->width, pCodecCtx->height);
int y_size = pCodecCtx->width * pCodecCtx->height;
AVPacket *packet = (AVPacket *) malloc(sizeof(AVPacket)); //6.1 分配一个packet AVPacket是存储压缩编码数据相关信息的一个结构体。
av_new_packet(packet, y_size); //分配packet的数据
av_dump_format(pFormatCtx, 0, file_path, 0); //输出视频信息
int index = 0;
int ret, got_picture;while (1)
{
if (av_read_frame(pFormatCtx, packet) < 0)
{
break; //这里认为视频读取完了
}
if (packet->stream_index == videoStream) {
ret = avcodec_decode_video2(pCodecCtx, pFrame, &got_picture,packet);//7.解码
if (ret < 0) {
qDebug()<<"decode error.";
return ;
}
if (got_picture) {//8. YUV420数据>RGB
sws_scale(img_convert_ctx,
(uint8_t const * const *) pFrame->data,
pFrame->linesize, 0, pCodecCtx->height, pFrameRGB->data,
pFrameRGB->linesize); }
}
av_free_packet(packet);
msleep(40); //延时ms使其帧率=1000/40
}

• 发送QImage数据到界面
  
  由于我们不能够在子线程中操作界面，(操作界面只能在主线程中进行，几乎所有的图形界面开发都是这样设定)，因此我们只能给主线程发送信号，信号带上这个QIMage，让主线程帮忙把这个图像显示出来。所以需要在 YUV420数据>RGB 后加入以下代码

//把这个RGB数据用QImage加载
QImage tmpImg((uchar *)out_buffer,pCodecCtx->width,pCodecCtx->height,QImage::Format_RGB32);
QImage image = tmpImg.copy(); //把图像复制一份传递给界面显示
emit sig_GetOneFrame(image); //发送信号


• 槽函数调用update函数，自动调事件处理函数

void CameraClient::slotGetOneFrame(QImage img){
mImage = img;
update(); //调用update将执行paintEvent函数
}


• 事件处理函数绘制

void CameraClient::paintEvent(QPaintEvent *event){
QPainter painter(this);
painter.setBrush(Qt::black);
painter.drawRect(0, 0, this->width(), this->height()); //先画成黑色
if (mImage.size().width() <= 0) return;
///将图像按比例缩放成和窗口一样大小
QImage img = mImage.scaled(this->size(),Qt::KeepAspectRatio);
int x = this->width() - img.width();
int y = this->height() - img.height();
x /= 2;
y /= 2;
painter.drawImage(QPoint(x,y),img); //画出图像
}


这样就完成了简单的视频显示

完整代码：

https://download.csdn.net/download/a18796007675/10454097

参考：http://blog.yundiantech.com/?log=blog&id=9