使用FFmpeg6.0打开rtsp并给opencv

FFmpeg 6.0版本不存在，最新版本是4.4。无论哪个版本，使用FFmpeg打开rtsp流并将其传递给OpenCV库进行处理的一般步骤如下：

1. 引入FFmpeg和OpenCV库的头文件：

#include <libavcodec/avcodec.h>
#include <libavformat/avformat.h>
#include <libswscale/swscale.h>
#include <opencv2/opencv.hpp>

2. 初始化FFmpeg库：

av_register_all();
avformat_network_init();

3. 打开rtsp流并获取流信息：

AVFormatContext* formatContext = avformat_alloc_context();
if (avformat_open_input(&formatContext, "rtsp://xxx.xxx.xxx.xxx:xxxx/", NULL, NULL) != 0) {
    avformat_free_context(formatContext);
    return -1;
}

if (avformat_find_stream_info(formatContext, NULL) < 0) {
    avformat_close_input(&formatContext);
    avformat_free_context(formatContext);
    return -1;
}

int videoStreamIndex = -1;
for (int i = 0; i < formatContext->nb_streams; i++) {
    if (formatContext->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
        videoStreamIndex = i;
        break;
    }
}

if (videoStreamIndex == -1) {
    avformat_close_input(&formatContext);
    avformat_free_context(formatContext);
    return -1;
}

AVStream* videoStream = formatContext->streams[videoStreamIndex];
AVCodecParameters* videoCodecParameters = videoStream->codecpar;
AVCodec* videoCodec = avcodec_find_decoder(videoCodecParameters->codec_id);
if (!videoCodec) {
    avformat_close_input(&formatContext);
    avformat_free_context(formatContext);
    return -1;
}

AVCodecContext* videoCodecContext = avcodec_alloc_context3(videoCodec);
if (!videoCodecContext) {
    avformat_close_input(&formatContext);
    avformat_free_context(formatContext);
    return -1;
}

if (avcodec_parameters_to_context(videoCodecContext, videoCodecParameters) < 0) {
    avcodec_close(videoCodecContext);
    avcodec_free_context(&videoCodecContext);
    avformat_close_input(&formatContext);
    avformat_free_context(formatContext);
    return -1;
}

if (avcodec_open2(videoCodecContext, videoCodec, NULL) < 0) {
    avcodec_close(videoCodecContext);
    avcodec_free_context(&videoCodecContext);
    avformat_close_input(&formatContext);
    avformat_free_context(formatContext);
    return -1;
}

4. 创建OpenCV窗口和图像缓冲区：

cv::namedWindow("Video", cv::WINDOW_NORMAL);
cv::Mat frame;

5. 解码rtsp流并将其传递给OpenCV进行处理：

AVPacket packet;
AVFrame* frameYUV = av_frame_alloc();
AVFrame* frameRGB = av_frame_alloc();
struct SwsContext* swsContext = sws_getContext(videoCodecContext->width, videoCodecContext->height, videoCodecContext->pix_fmt, videoCodecContext->width, videoCodecContext->height, AV_PIX_FMT_BGR24, SWS_BILINEAR, NULL, NULL, NULL);
while (av_read_frame(formatContext, &packet) >= 0) {
    if (packet.stream_index == videoStreamIndex) {
        avcodec_send_packet(videoCodecContext, &packet);
        while (avcodec_receive_frame(videoCodecContext, frameYUV) == 0) {
            sws_scale(swsContext, frameYUV->data, frameYUV->linesize, 0, videoCodecContext->height, frameRGB->data, frameRGB->linesize);
            cv::Mat srcMat(videoCodecContext->height, videoCodecContext->width, CV_8UC3, frameRGB->data[0]);
            cv::cvtColor(srcMat, frame, cv::COLOR_BGR2RGB);
            cv::imshow("Video", frame);
            cv::waitKey(1);
        }
    }
    av_packet_unref(&packet);
}

6. 释放FFmpeg和OpenCV资源：

sws_freeContext(swsContext);
av_frame_free(&frameYUV);
av_frame_free(&frameRGB);
avcodec_close(videoCodecContext);
avcodec_free_context(&videoCodecContext);
avformat_close_input(&formatContext);
avformat_free_context(formatContext);
cv::destroyAllWindows();

以上步骤提供了一个基本的框架，具体实现可能会因为不同的需求和环境而有所不同，需要根据实际情况进行调整和修改。