android - Comment faire pour multiplexer le fichier audio et de la vidéo?

j'ai un 3gp fichier qui est enregistré par le microphone et d'un fichier vidéo mp4.
je veux multiplexer le fichier audio et de fichiers vidéo en un fichier mp4 et l'enregistrer.
j'ai beaucoup cherché mais n'ai pas trouvé quelque chose d'utile pour l'utilisation de MediaMuxer api d'android.
MediaMuxer api

Mise à JOUR : c'est ma méthode qui mux deux fichiers , j'ai une Exception dans ce.
et la raison en est que la destination mp4 fichier n'a pas toute la piste!
quelqu'un peut m'aider avec l'ajout de l'audio et de la vidéo à la piste de multiplexeur??

Exception

java.lang.IllegalStateException: Failed to stop the muxer

mon code:

private void cloneMediaUsingMuxer( String dstMediaPath) throws IOException {
//Set up MediaExtractor to read from the source.
MediaExtractor soundExtractor = new MediaExtractor();
soundExtractor.setDataSource(audioFilePath);
MediaExtractor videoExtractor = new MediaExtractor();
AssetFileDescriptor afd2 = getAssets().openFd("Produce.MP4");
videoExtractor.setDataSource(afd2.getFileDescriptor() , afd2.getStartOffset(),afd2.getLength());
//PATH
//extractor.setDataSource();
int trackCount = soundExtractor.getTrackCount();
int trackCount2 = soundExtractor.getTrackCount();
//assertEquals("wrong number of tracks", expectedTrackCount, trackCount);
//Set up MediaMuxer for the destination.
MediaMuxer muxer;
muxer = new MediaMuxer(dstMediaPath, MediaMuxer.OutputFormat.MUXER_OUTPUT_MPEG_4);
//Set up the tracks.
HashMap<Integer, Integer> indexMap = new HashMap<Integer, Integer>(trackCount);
for (int i = 0; i < trackCount; i++) {
soundExtractor.selectTrack(i);
MediaFormat SoundFormat = soundExtractor.getTrackFormat(i);
int dstIndex = muxer.addTrack(SoundFormat);
indexMap.put(i, dstIndex);
}
HashMap<Integer, Integer> indexMap2 = new HashMap<Integer, Integer>(trackCount2);
for (int i = 0; i < trackCount2; i++) {
videoExtractor.selectTrack(i);
MediaFormat videoFormat = videoExtractor.getTrackFormat(i);
int dstIndex2 = muxer.addTrack(videoFormat);
indexMap.put(i, dstIndex2);
}
//Copy the samples from MediaExtractor to MediaMuxer.
boolean sawEOS = false;
int bufferSize = MAX_SAMPLE_SIZE;
int frameCount = 0;
int offset = 100;
ByteBuffer dstBuf = ByteBuffer.allocate(bufferSize);
MediaCodec.BufferInfo bufferInfo = new MediaCodec.BufferInfo();
MediaCodec.BufferInfo bufferInfo2 = new MediaCodec.BufferInfo();
muxer.start();
while (!sawEOS) {
bufferInfo.offset = offset;
bufferInfo.size = soundExtractor.readSampleData(dstBuf, offset);
bufferInfo2.offset = offset;
bufferInfo2.size = videoExtractor.readSampleData(dstBuf, offset);
if (bufferInfo.size < 0) {
sawEOS = true;
bufferInfo.size = 0;
bufferInfo2.size = 0;
}else if(bufferInfo2.size < 0){
sawEOS = true;
bufferInfo.size = 0;
bufferInfo2.size = 0;
}
else {
bufferInfo.presentationTimeUs = soundExtractor.getSampleTime();
bufferInfo2.presentationTimeUs = videoExtractor.getSampleTime();
//bufferInfo.flags = extractor.getSampleFlags();
int trackIndex = soundExtractor.getSampleTrackIndex();
int trackIndex2 = videoExtractor.getSampleTrackIndex();
muxer.writeSampleData(indexMap.get(trackIndex), dstBuf,
bufferInfo);
soundExtractor.advance();
videoExtractor.advance();
frameCount++;
}
}
Toast.makeText(getApplicationContext(),"f:"+frameCount,Toast.LENGTH_SHORT).show();
muxer.stop();
muxer.release();
}

Mise à JOUR 2: problème résolu! de vérifier ma réponse à ma question.

merci pour votre aide

Êtes-vous prêt à utiliser le NDK ou voulez-vous la solution pour être en pure java?
Quelque chose pour résoudre le problème est parfait.java pur et mediaMuxer est mieux, je pense.
Pouvez-vous fournir plus de les détails de l'exception? Il devrait y avoir un code d'exception à partir de MediaMuxer fournie dans le logcat dans vous regardez détaillé des paramètres de

InformationsquelleAutor mohamad ali gharat | 2015-07-22

J'ai eu quelques problème avec des pistes audio et des fichiers vidéo.
ils ont disparu et tout est ok avec mon code , mais Maintenant vous pouvez l'utiliser pour la fusion d'un fichier audio et un fichier vidéo ensemble.

Code:

private void muxing() {
String outputFile = "";
try {
File file = new File(Environment.getExternalStorageDirectory() + File.separator + "final2.mp4");
file.createNewFile();
outputFile = file.getAbsolutePath();
MediaExtractor videoExtractor = new MediaExtractor();
AssetFileDescriptor afdd = getAssets().openFd("Produce.MP4");
videoExtractor.setDataSource(afdd.getFileDescriptor() ,afdd.getStartOffset(),afdd.getLength());
MediaExtractor audioExtractor = new MediaExtractor();
audioExtractor.setDataSource(audioFilePath);
Log.d(TAG, "Video Extractor Track Count " + videoExtractor.getTrackCount() );
Log.d(TAG, "Audio Extractor Track Count " + audioExtractor.getTrackCount() );
MediaMuxer muxer = new MediaMuxer(outputFile, MediaMuxer.OutputFormat.MUXER_OUTPUT_MPEG_4);
videoExtractor.selectTrack(0);
MediaFormat videoFormat = videoExtractor.getTrackFormat(0);
int videoTrack = muxer.addTrack(videoFormat);
audioExtractor.selectTrack(0);
MediaFormat audioFormat = audioExtractor.getTrackFormat(0);
int audioTrack = muxer.addTrack(audioFormat);
Log.d(TAG, "Video Format " + videoFormat.toString() );
Log.d(TAG, "Audio Format " + audioFormat.toString() );
boolean sawEOS = false;
int frameCount = 0;
int offset = 100;
int sampleSize = 256 * 1024;
ByteBuffer videoBuf = ByteBuffer.allocate(sampleSize);
ByteBuffer audioBuf = ByteBuffer.allocate(sampleSize);
MediaCodec.BufferInfo videoBufferInfo = new MediaCodec.BufferInfo();
MediaCodec.BufferInfo audioBufferInfo = new MediaCodec.BufferInfo();
videoExtractor.seekTo(0, MediaExtractor.SEEK_TO_CLOSEST_SYNC);
audioExtractor.seekTo(0, MediaExtractor.SEEK_TO_CLOSEST_SYNC);
muxer.start();
while (!sawEOS)
{
videoBufferInfo.offset = offset;
videoBufferInfo.size = videoExtractor.readSampleData(videoBuf, offset);
if (videoBufferInfo.size < 0 || audioBufferInfo.size < 0)
{
Log.d(TAG, "saw input EOS.");
sawEOS = true;
videoBufferInfo.size = 0;
}
else
{
videoBufferInfo.presentationTimeUs = videoExtractor.getSampleTime();
videoBufferInfo.flags = videoExtractor.getSampleFlags();
muxer.writeSampleData(videoTrack, videoBuf, videoBufferInfo);
videoExtractor.advance();
frameCount++;
Log.d(TAG, "Frame (" + frameCount + ") Video PresentationTimeUs:" + videoBufferInfo.presentationTimeUs +" Flags:" + videoBufferInfo.flags +" Size(KB) " + videoBufferInfo.size / 1024);
Log.d(TAG, "Frame (" + frameCount + ") Audio PresentationTimeUs:" + audioBufferInfo.presentationTimeUs +" Flags:" + audioBufferInfo.flags +" Size(KB) " + audioBufferInfo.size / 1024);
}
}
Toast.makeText(getApplicationContext() , "frame:" + frameCount , Toast.LENGTH_SHORT).show();
boolean sawEOS2 = false;
int frameCount2 =0;
while (!sawEOS2)
{
frameCount2++;
audioBufferInfo.offset = offset;
audioBufferInfo.size = audioExtractor.readSampleData(audioBuf, offset);
if (videoBufferInfo.size < 0 || audioBufferInfo.size < 0)
{
Log.d(TAG, "saw input EOS.");
sawEOS2 = true;
audioBufferInfo.size = 0;
}
else
{
audioBufferInfo.presentationTimeUs = audioExtractor.getSampleTime();
audioBufferInfo.flags = audioExtractor.getSampleFlags();
muxer.writeSampleData(audioTrack, audioBuf, audioBufferInfo);
audioExtractor.advance();
Log.d(TAG, "Frame (" + frameCount + ") Video PresentationTimeUs:" + videoBufferInfo.presentationTimeUs +" Flags:" + videoBufferInfo.flags +" Size(KB) " + videoBufferInfo.size / 1024);
Log.d(TAG, "Frame (" + frameCount + ") Audio PresentationTimeUs:" + audioBufferInfo.presentationTimeUs +" Flags:" + audioBufferInfo.flags +" Size(KB) " + audioBufferInfo.size / 1024);
}
}
Toast.makeText(getApplicationContext() , "frame:" + frameCount2 , Toast.LENGTH_SHORT).show();
muxer.stop();
muxer.release();
} catch (IOException e) {
Log.d(TAG, "Mixer Error 1 " + e.getMessage());
} catch (Exception e) {
Log.d(TAG, "Mixer Error 2 " + e.getMessage());
}

}

grâce à ces exemples de codes:MediaMuxer des exemples de Codes-vraiment parfait

Je copie le code, mais il ne fonctionne pas , Erreur: impossible d'ajouter la piste pour le multiplexeur? Comment le résoudre? Thx.
Excellent exemple. Pour ajouter quelque chose de plus: j'ai rencontré un problème lorsque vous essayez de multiplexer dans une piste audio qui n'a pas été à partir d'un format pris en charge. Fondamentalement, si vous produisez une vidéo mp4 à partir de l'encodage de pistes audio et vidéo, ceux-ci doivent être à partir d'un éventail de types mime (formats). Dans le cas de l'audio, ceux-ci DOIVENT être MIMETYPE_AUDIO_AMR_NB, MIMETYPE_AUDIO_AMR_WB ou MIMETYPE_AUDIO_AAC. Sinon vous rencontrerez des "Inconnus type mime audio/quoique ce soit"." erreur.
Bonjour @mohamed ali gharat comment ajouter sdcard vidéo et de l'audio sans utiliser d'Actifs dossier?
l'utilisation de cette bibliothèque pour choisir le fichier: github.com/bartwell/ExFilePicker, cette bibliothèque vous donne le chemin du fichier sélectionné, obtenir que le chemin d'accès et le mettre dans videoExtractor.setDataSource(); cela peut être un chemin d'accès en tant que paramètre. Je suis à 90% sûr que cela va fonctionner
ok @mohamadaligharat je vais essayer..
Mais, Dans mon cas, j'ai d'abord avoir capturer des vidéos et de second cas, la vue de cette vidéo et en bas jusqu'à obtenir la carte sd mp3 après cliquez sur mp3 ce de fusionner les deux de tout soultion?
la seule chose que vous souhaitez est le chemin d'accès du fichier vidéo ou audio. Si vous avez le chemin, alors vous pouvez le faire
je peux le faire mp4 fichier est créé, mais je ne peux pas lire ce fichier d'erreur
Pouvez-vous jouer avec MXPlayer ?
Laissez-nous continuer cette discussion dans le chat.
Oui mais même message d'erreur
Je suis non pris en charge mime audio/raw' erreur lorsque j'essaie d'exécuter l' .le code ci-dessus. Je suis l'enregistrement audio séparément, mais je ne suis pas en mesure de comprendre comment faire pour convertir de l'audio à un particulier, encodé au format. de sorte que le code ci-dessus peut fonctionner. S'il vous plaît aider si vous le pouvez.
La résultante de fichier MP4 semble être comprimé et pixélisée. Est-il possible d'obtenir une haute résolution de sortie MP4?
qu'advient-il si la durée de l'audio est plus courte que la longueur de la vidéo? l'audio s'arrête lorsque la vidéo est toujours en cours de lecture
Où avez-vous le code pour cela? Est-il possible de savoir si le fichier de sortie peut être mauvais? Dans certains cas, j'ai eu un black vidéo (avec audio qui joue très bien)... Et quand j'choisissez "mp3" fichier audio en fichier d'entrée, il a encore l'erreur de IllegalStateException: Failed to add the track to the muxer ...
Comment savoir quels sont ceux qui sont pris en charge ? Comment vérifier avant de tenter de les mux ?
avez-vous la réponse?
je multiplexé un .fichier vidéo mp4, d'avoir deux pistes, video et .aac,quand j'ai fusionner avec une autre .aac fichier, je reçois une vidéo sans piste audio d'un fichier vidéo. toute idée??

InformationsquelleAutor mohamad ali gharat

1

Grâce mohamad ali gharat pour cette réponse, ça m'aide aussi beaucoup.
Mais il y a quelque modification que j'ai apportée au code de travail,
d'abord: - je changer

videoExtractor.setDataSource à
videoExtractor.setDataSource(Environment.getExternalStorageDirectory().getPath() + "/Produce.MP4");

pour charger la vidéo à partir de SDCard.
Deuxième: j'obtiens l'erreur avec

videoBufferInfo.flags = videoExtractor.getSampleFlags();

afin de le modifier pour

videoBufferInfo.flags = MediaCodec.BUFFER_FLAG_SYNC_FRAME;

pour le faire fonctionner, que ce lien dire Android MediaMuxer a omis de s'arrêter
- après avoir enregistrer la vidéo ne peut pas lire ce fichier d'erreur.
InformationsquelleAutor Ali Al-Hadidi
0

Ce dont vous aurez besoin pour travailler dans de ffmpeg. Voici un lien pour vous aider à:

FFmpeg sur Android

ffmpeg exige le NDK Android.

Une fois que vous avez que de travail, vous pouvez travailler sur le multiplexage audio et vidéo ensemble à l'aide de ffmpeg. Voici un lien vers une question qui, il le fait avec 2 fichiers vidéo (la réponse doit être similaire).

FFMPEG mux audio et vidéo (à partir d'une autre vidéo) - cartographie problème
- merci pour cela. J'ai trouvé un code source qui a été proche de ce que et plus facile que de ffmpeg.mais je n'ai aucune expérience, même dans MediaMuxer de la classe et du comportement , pouvez-vous m'aider avec un facile à utiliser la réponse??
InformationsquelleAutor StephenG

Vous devez vous connecter pour publier un commentaire.