ffmpeg的AVFrame

AVFrame是FFmpeg库中的一个结构体，用于表示音视频帧的数据。

AVFrame包含了音视频帧的各种信息，例如数据指针、宽度、高度、像素格式、采样率等。通过AVFrame，可以获取和设置音视频帧的各种属性。

AVFrame可以被用于存储解码后的音视频数据，也可以用于存储编码前的音视频数据。在解码过程中，解码器将原始的音视频数据解码为AVFrame结构体，而在编码过程中，AVFrame结构体将被编码器编码为压缩格式的音视频数据。

由于AVFrame是FFmpeg库中的一部分，因此使用AVFrame需要先初始化FFmpeg库，并根据需要进行相应的配置和操作。

相关问题

ffmpeg AVFrame

AVFrame是FFmpeg中的一个结构体，用于表示视频帧的数据。它包含了视频帧的像素数据、宽度、高度、格式等信息。在使用AVFrame之前，需要先分配内存，并设置其各个字段的值。可以使用av_frame_alloc()函数来分配AVFrame实例，并使用av_frame_get_buffer()或av_image_alloc()函数来分配像素数据的内存。其中av_frame_get_buffer()函数会自动选择最优的对齐方式来分配内存，而av_image_alloc()函数可以指定像素数据的对齐方式。通过设置AVFrame的width、height和format字段，可以指定视频帧的宽度、高度和像素格式。总之，AVFrame是用于存储和处理视频帧数据的关键结构体。<span class="em">1</span><span class="em">2</span><span class="em">3</span>
#### 引用[.reference_title]
- *1* [FFmpeg数据结构AVFrame](https://blog.csdn.net/irainsa/article/details/128977176)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"]
- *2* *3* [FFMPEG关键结构体——AVFrame](https://blog.csdn.net/PPPPPPPKD/article/details/125586279)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"]
[ .reference_list ]

opencv4 FFmpeg AVframe 转mat

可以使用以下代码将 FFmpeg 中的 AVFrame 转换为 OpenCV 的 Mat 对象：

#include <opencv2/opencv.hpp>
extern "C" {
#include <libavutil/imgutils.h>
#include <libswscale/swscale.h>
#include <libavcodec/avcodec.h>
}

cv::Mat avframe_to_mat(const AVFrame* frame) {
    cv::Mat mat;
    int width = frame->width;
    int height = frame->height;
    AVPixelFormat pFormat = static_cast<AVPixelFormat>(frame->format);

    // 分配 AVFrame 中数据所需的内存
    av_image_alloc(frame->data, frame->linesize, width, height, pFormat, 1);

    // 将 AVFrame 转换为 BGR 格式的 Mat 对象
    SwsContext* sws_ctx = sws_getContext(width, height, pFormat, width, height, AV_PIX_FMT_BGR24, SWS_BILINEAR, NULL, NULL, NULL);
    if (sws_ctx == NULL) {
        return mat;
    }

    int size = av_image_get_buffer_size(AV_PIX_FMT_BGR24, width, height, 1);
    uint8_t* buffer = (uint8_t*)av_malloc(size * sizeof(uint8_t));
    if (buffer == NULL) {
        sws_freeContext(sws_ctx);
        return mat;
    }

    AVFrame* pFrame = av_frame_alloc();
    av_image_fill_arrays(pFrame->data, pFrame->linesize, buffer, AV_PIX_FMT_BGR24, width, height, 1);

    sws_scale(sws_ctx, frame->data, frame->linesize, 0, height, pFrame->data, pFrame->linesize);

    mat = cv::Mat(height, width, CV_8UC3, buffer);

    sws_freeContext(sws_ctx);
    av_frame_free(&pFrame);

    return mat;
}

其中，AVFrame 为要转换的帧，返回值为转换后的 Mat 对象。注意，需要在使用完 Mat 对象后释放内存。