Comment ouvrir un pipeline GStreamer de OpenCV avec VideoWriter

Je suis la capture d'images vidéo avec OpenCV VideoCapture. La capture fonctionne très bien que je suis capable d'utiliser les images comme ceci:

cv::VideoCapture cap("v4l2src device=/dev/video1 ! videoscale ! videorate ! video/x-raw, width=640, height=360, framerate=30/1 ! videoconvert ! appsink");
cv::imshow("feed", frame);

Je voudrais aussi envoyer le flux sur le réseau et c'est là que je suis bloqué. De toute façon je suis d'échec dans le appsrc pipeline de la partie. Je veux encoder le flux de jpeg et de l'envoyer vie udp. C'est ce que j'ai:

cv::VideoWriter writer
writer.open("appsrc ! videoconvert ! jpegenc ! jpegparse ! rtpjpegpay pt=96 ! udpsink host=192.168.1.25 port=5000", 0, (double)30, cv::Size(640, 360), true);

Ressemble à la ligne ci-dessus ne fait rien. Le writer << framene pas faire n'importe quoi. Aussi cette gstreamer commande n'affiche rien:

gst-launch-1.0 udpsrc port=5000 caps = "application/x-rtp, media=(string)video, clock-rate=(int)90000, encoding-name=(string)JPEG, payload=(int)96" ! rtpjpegdepay ! jpegdec ! decodebin ! videoconvert ! autovideosink

Je ne sais pas où je suis, à défaut, dans le writer.open partie. Si je lance le gstreamer des commandes comme ce soufflet de travailler:

gst-launch-1.0 v4l2src device=/dev/video1 ! videoscale ! videorate ! video/x-raw, width=640, height=360, framerate=30/1 ! jpegenc ! jpegparse ! rtpjpegpay pt=96 ! udpsink host=192.168.1.25 port=5000
gst-launch-1.0 udpsrc port=5000 caps = "application/x-rtp, media=(string)video, clock-rate=(int)90000, encoding-name=(string)JPEG, payload=(int)96" ! rtpjpegdepay ! jpegdec ! decodebin ! videoconvert ! autovideosink

OriginalL'auteur Pavel | 2017-09-14

  1. 7

    Avant d'utiliser OpenCV est Gstreamer API, nous avons besoin d'un travail de pipeline à l'aide de la Gstreamer outil de ligne de commande.

    Expéditeur: L'OP est en utilisant un codage JPEG, de sorte que ce pipeline sera en utilisant le même encodage.

    gst-launch-1.0 -v v4l2src \
! video/x-raw,format=YUY2,width=640,height=480 \
! jpegenc \
! rtpjpegpay \
! udpsink host=127.0.0.1 port=5000

    Récepteur: L'évier caps pour rtpjpegdepay besoin pour correspondre à la src caps de la rtpjpegpay de l'expéditeur pipeline.

    gst-launch-1.0 -v udpsrc port=5000 \
! application/x-rtp, media=video, clock-rate=90000, encoding-name=JPEG, payload=26 \
! rtpjpegdepay \
! jpegdec \
! xvimagesink sync=0

    Maintenant que nous avons travail des pipelines pour l'expéditeur et le récepteur, on peut les porter vers OpenCV.

    Expéditeur:

    void sender()
{
    //VideoCapture: Getting frames using 'v4l2src' plugin, format is 'BGR' because
    //the VideoWriter class expects a 3 channel image since we are sending colored images.
    //Both 'YUY2' and 'I420' are single channel images. 
    VideoCapture cap("v4l2src ! video/x-raw,format=BGR,width=640,height=480,framerate=30/1 ! appsink",CAP_GSTREAMER);

    //VideoWriter: 'videoconvert' converts the 'BGR' images into 'YUY2' raw frames to be fed to
    //'jpegenc' encoder since 'jpegenc' does not accept 'BGR' images. The 'videoconvert' is not
    //in the original pipeline, because in there we are reading frames in 'YUY2' format from 'v4l2src'
    VideoWriter out("appsrc ! videoconvert ! video/x-raw,format=YUY2,width=640,height=480,framerate=30/1 ! jpegenc ! rtpjpegpay ! udpsink host=127.0.0.1 port=5000",CAP_GSTREAMER,0,30,Size(640,480),true);

    if(!cap.isOpened() || !out.isOpened())
    {
        cout<<"VideoCapture or VideoWriter not opened"<<endl;
        exit(-1);
    }

    Mat frame;

    while(true) {

        cap.read(frame);

        if(frame.empty())
            break;

        out.write(frame);

        imshow("Sender", frame);
        if(waitKey(1) == 's')
            break;
    }
    destroyWindow("Sender");
}

    Récepteur:

    void receiver()
{    
    //The sink caps for the 'rtpjpegdepay' need to match the src caps of the 'rtpjpegpay' of the sender pipeline
    //Added 'videoconvert' at the end to convert the images into proper format for appsink, without
    //'videoconvert' the receiver will not read the frames, even though 'videoconvert' is not present
    //in the original working pipeline
    VideoCapture cap("udpsrc port=5000 ! application/x-rtp,media=video,payload=26,clock-rate=90000,encoding-name=JPEG,framerate=30/1 ! rtpjpegdepay ! jpegdec ! videoconvert ! appsink",CAP_GSTREAMER);

    if(!cap.isOpened())
    {
        cout<<"VideoCapture not opened"<<endl;
        exit(-1);
    }

    Mat frame;

    while(true) {

        cap.read(frame);

        if(frame.empty())
            break;

        imshow("Receiver", frame);
        if(waitKey(1) == 'r')
            break;
    }
    destroyWindow("Receiver");
}
    Salut monsieur! J'ai essayé votre code ci-dessus, mais il n'a pas de travail, lors de l'ouverture de la VideoWriter, ce qui est faux, je suis sous windows et j'ai installé le GStreamer et ajoutée à l'environnement path.
    Je ne sais pas où le mettre pour télécharger le fichier?
    pastebin.com/Xzf3SKud
    Merci pour les explication, ressemble à ça fera l'affaire!
    le problème est probablement plus un problème, mais que la construction de OpenCV n'a pas de GStreamer, vous aurez besoin de le recompiler avec gstreamer vous soutenir

    OriginalL'auteur zindarod