Comment obtenir des Octets de CMSampleBufferRef , À Envoyer Sur le Réseau

Suis Captuing vidéo à l'aide de AVFoundation cadre de travail .Avec l'aide de la Documentation d'Apple http://developer.apple.com/library/ios/#documentation/AudioVideo/Conceptual/AVFoundationPG/Articles/03_MediaCapture.html%23//apple_ref/doc/uid/TP40010188-CH5-SW2

Maintenant je n'ai la Suite des choses

1.Créé videoCaptureDevice

2.Créé AVCaptureDeviceInput et définir videoCaptureDevice

3.Créé AVCaptureVideoDataOutput et mis en œuvre Délégué

4.Créé AVCaptureSession - ensemble d'entrée comme AVCaptureDeviceInput et de sortie comme AVCaptureVideoDataOutput

5.Dans AVCaptureVideoDataOutput Délégué méthode 

-(void)captureOutput:(AVCaptureOutput *)captureOutput didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection

j'ai eu CMSamplebuffer et Converti en UIImage Et testé pour imprimer UIImageview à l'aide de 

[self.imageView performSelectorOnMainThread:@selector(setImage:) withObject:image waitUntilDone:YES];

Tout s'est bien passé jusqu'à ce........

MON Problème EST,
J'ai besoin d'envoyer des images vidéo par Socket UDP .même si la suite est une mauvaise idée, j'ai essayé ,UIImage à NSData et de l'Envoyer via UDP Poche. Mais j'ai reçu tellement de Retard dans le Traitement de la vidéo.La plupart des problèmes à cause de UIImage à NSDate

Donc Merci de me Donner la Solution Pour mon problème

1)Aucun moyen de convertir CMSampleBUffer ou CVImageBuffer à NSData ??

2)Comme l'Audio File d'attente de Service et en File d'attente pour la Vidéo de stocker UIImage et ne UIImage à NSDate
Et L'Envoi ???

si je roule derrière le Mauvais Algorithme Veuillez chemin m'écrire direction

Merci D'Avance

InformationsquelleAutor Asta ni enohpi | 2011-05-31
  1. 34

    Voici le code pour obtenir le tampon. Ce code suppose un plat de l'image (par exemple, BGRA).

    NSData* imageToBuffer( CMSampleBufferRef source) {
    CVImageBufferRef imageBuffer = CMSampleBufferGetImageBuffer(source);
    CVPixelBufferLockBaseAddress(imageBuffer,0);

    size_t bytesPerRow = CVPixelBufferGetBytesPerRow(imageBuffer);
    size_t width = CVPixelBufferGetWidth(imageBuffer);
    size_t height = CVPixelBufferGetHeight(imageBuffer);
    void *src_buff = CVPixelBufferGetBaseAddress(imageBuffer);

    NSData *data = [NSData dataWithBytes:src_buff length:bytesPerRow * height];

    CVPixelBufferUnlockBaseAddress(imageBuffer, 0);
    return [data autorelease];
}

    Une approche plus efficace serait d'utiliser un NSMutableData ou un pool de mémoire tampon.

    L'envoi d'un 480x360 image à chaque seconde nécessitera un 4.1 Mbps connexion en supposant que 3 couches de couleur.

    • Merci pour votre réponse . CVimagebuffer à NSdata est ok. J'ai un petit doute ,dans le récepteur, je ne Pouvais pas revenir la CVimagebuffer,bcoz qui ont besoin de la hauteur,la largeur séparément et d'octets par ligne trop
    • Vous pouvez envoyer ce dans les données d'en-tête "" si tu le voulais. [width:16 bits][hauteur:16 bits][numéro de séquence:16 bits][count:16bit][fragment de données]. Il y a d'autres problèmes avec votre installation. Même en supposant un MTU de 1500 vos images vont-elles être réparties sur de nombreux paquets UDP. Vous allez perdre des paquets étant donné le débit dont vous avez besoin. Je vous suggère d'utiliser le protocole TCP. Je ne vois aucun avantage à l'aide du protocole UDP étant donné que vous ne serez pas en mesure de pousser plus alors peut-être que 2 images par seconde sur le téléphone sur un LAN/wi-fi (@480x360). Et à ce rythme vous avez besoin de soins de la perte de données vidéo.
    • Vous pouvez également envoyer la vidéo information à l'avance pour le récepteur, ou dans le premier paquet UDP. Vous aurez toujours besoin d'une certaine manière à identifier les fragments d'image.
    • Comment voulez-vous convertir le retour à une image de la mémoire tampon?
    • Vous pouvez utiliser CGImageCreate
    • Ce code est en donnant la longueur des données 3686400 . mais l'image est juste 3000
    • Que voulez-vous dire de l'image est juste 3000? Voulez-vous dire au juste 3000 pixels au total? Quel est le format de l'image (RGB, YUV, etc...)?
    • Je veux dire quand je NSLog(@"%i",[longueur]); Puis sa journalisation 3686400 toujours.
    • En utilisant le code ci-dessus pour obtenir NSData, comment voulez-vous revenir à CVImageBuffer en utilisant CGImageCreate? Je ne vois pas le lien. Ou est-il un autre moyen?
    • Je ne suis pas sûr. Je voudrais juste utiliser un CVPixelBuffer et copier le contenu de la NSData sur le CVPixelBuffer.
    • la largeur est inutilisé!?
    • comment obtenir des octets de la mémoire tampon audio?

    InformationsquelleAutor Steve McFarlin
  2. 2

    Utilisation CMSampleBufferGetImageBuffer pour obtenir CVImageBufferRef à partir de l'échantillon de la mémoire tampon, puis obtenir les données bitmap avec CVPixelBufferGetBaseAddress. Cela évite inutilement la copie de l'image.

    • Merci pour Votre réponse .Déjà j'ai utilisé CVPixelBufferGetBaseAddress mais je ne peux utiliser que des octets? et l'aide que seul ,puis-je en mesure de dessiner une image à côté du récepteur???
    • Oui, ce sont des octets. Il y a CVPixelBufferGetHeight()*CVPixelBufferGetBytesPerRow() d'entre eux. Et si vous le faites correctement, vous serez en mesure de reconstruire l'image à l'autre extrémité.
    • Cela fonctionne de la même pour planaires format? Ou faut-il utiliser CVPixelBufferGetHeightOfPlane et CVPixelBufferGetBytesPerRowOfPlane à la place?
    • Vous devez utiliser le plan de versions. Vous permet d'économiser le décodage de la CVPlanarPixelBufferInfo_YCbCrBiPlanar struct.
    InformationsquelleAutor Rhythmic Fistman