【发布时间】:2014-10-06 18:00:18
【问题描述】:
我想从YUV images 序列创建mp4 video。我在我的 Nexus 5、Android 4.4 上测试此代码
问题是我没有来自encoder 的输出数据。
编码器只给我 2 次数据
- 第一次 26 字节的 csd-0 csd-1
- 第二次 3K 编码数据?
然后 encoder.dequeueOutputBuffer(info, TIMEOUT_USEC) 总是 return -1 — INFO_TRY_AGAIN_LATER
代码
String type="video/avc";
MediaCodecInfo codecInfo = selectCodec(type);
int colorFormat = selectColorFormat(codecInfo, type); // This return 21
MediaFormat format = MediaFormat.createVideoFormat(type,
videowidth, videoheight); //"video/avc" 1280 720
// Set some properties
format.setInteger(MediaFormat.KEY_COLOR_FORMAT, colorFormat);
format.setInteger(MediaFormat.KEY_BIT_RATE, 17000000);
format.setInteger(MediaFormat.KEY_FRAME_RATE, 30);
format.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 10);
format.setInteger(MediaFormat.KEY_WIDTH,videowidth);
format.setInteger(MediaFormat.KEY_HEIGHT,videoheight);
encoder = MediaCodec.createByCodecName(codecInfo.getName());
encoder.configure(format, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);
encoder.start(); //ок
ByteBuffer[] encoderInputBuffers = encoder.getInputBuffers();
ByteBuffer[] encoderOutputBuffers = encoder.getOutputBuffers();
BufferInfo info = new BufferInfo();
int k = 0; // just counter
int inputBufIndex;
int encoderStatus=0;
int col=20; // i want to encode 20 frames
info = new BufferInfo();
while (k < col) {
k++;
try {
Thread.sleep(33); //some pause
} catch (InterruptedException e) {
// TODO Auto-generated catch block
e.printStackTrace();
}
//input to buffer always works fine
inputBufIndex = encoder.dequeueInputBuffer(TIMEOUT_USEC);
if (inputBufIndex >= 0) {
if (k == col) { //EOS
encoder.queueInputBuffer(inputBufIndex, 0, 0, ptsUsec,
MediaCodec.BUFFER_FLAG_END_OF_STREAM);
Log.v(TAG, "sent input EOS (with zero-length frame)");
} else {
ByteBuffer inputBuf = encoderInputBuffers[inputBufIndex];
inputBuf.clear();
byte[] frameData = new byte[videowidth * videoheight * 3 / 2]; //1 plane w*h Y + 2 planes w*h/2 Cb Cr
Arrays.fill(frameData, (byte) 0); // zero for example
inputBuf.put(frameData);
encoder.queueInputBuffer(inputBufIndex, 0,
frameData.length, ptsUsec, 0);
Log.v(TAG, "submitted frame " + k + " to enc");
}
} else {
// either all in use, or we timed out during initial setup
Log.v(TAG, "input buffer not available");
}
// output Buffer have problems
info = new BufferInfo();
encoderStatus = encoder.dequeueOutputBuffer(info, TIMEOUT_USEC);
// 1-st time encoderStatus =-2 INFO_OUTPUT_FORMAT_CHANGED
// 2-nd time encoderStatus =0
// 3 to 20 times encoderStatus =-1
if (encoderStatus == MediaCodec.INFO_TRY_AGAIN_LATER) {
// no output available yet
Log.v(TAG, "no output from encoder available");
} else if (encoderStatus == MediaCodec.INFO_OUTPUT_BUFFERS_CHANGED) {
encoderOutputBuffers = encoder.getOutputBuffers();
Log.v(TAG, "encoder output buffers changed");
} else if (encoderStatus == MediaCodec.INFO_OUTPUT_FORMAT_CHANGED) {
Log.v(TAG, "encoder output format changed: " +encoder.getOutputFormat() );
} else if (encoderStatus < 0) {
Log.v(TAG, "unexpected result from encoder.dequeueOutputBuffer: " + encoderStatus);
} else { // encoderStatus >= 0
ByteBuffer encodedData = encoderOutputBuffers[encoderStatus];
if (encodedData == null) {
Log.v(TAG, "encoderOutputBuffer " + encoderStatus + " was null");
}
else
{
Log.v(TAG, "encoderOutputBuffer " + info.size+" | "+encoderStatus+" | "+info );
}
encoder.releaseOutputBuffer(encoderStatus, false);
}
}
Log.d(TAG, "-finish-");
日志:
08-13 17:23:32.927: V/CAR_DVR(20874): 编码器输出格式: {帧率=30,比特率=17000000,高度=720,mime=视频/avc, 颜色格式=21,i-frame-interval=10,宽度=1280} 08-13 17:23:35.347: V/CAR_DVR(20874): 提交帧 1 到 enc 08-13 17:23:37.637: V/CAR_DVR(20874):编码器输出格式改变: {csd-1=java.nio.ByteArrayBuffer[位置=0,限制=8,容量=8], 高度=720,哑剧=视频/avc, csd-0=java.nio.ByteArrayBuffer[位置=0,限制=18,容量=18], 什么=1869968451,宽度=1280} 08-13 17:23:38.537:V/CAR_DVR(20874): 将第 2 帧提交给 enc 08-13 17:23:39.177: V/CAR_DVR(20874): 编码器输出缓冲区 26 | 0 | android.media.MediaCodec$BufferInfo@4264dfb0 08-13 17:23:40.007: V/CAR_DVR(20874): 将第 3 帧提交到 enc 08-13 17:23:55.207: V/CAR_DVR(20874):编码器输出缓冲区 3625 | 1 | android.media.MediaCodec$BufferInfo@42654b60 08-13 17:23:57.067: V/CAR_DVR(20874): 将第 4 帧提交到 enc 08-13 17:24:03.187: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:10.167: V/CAR_DVR(20874): 将第 5 帧提交到 enc 08-13 17:24:14.477: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:14.787: V/CAR_DVR(20874): 将第 6 帧提交到 enc 08-13 17:24:14.787: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:15.047: V/CAR_DVR(20874): 将第 7 帧提交到 enc 08-13 17:24:15.047: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:15.317: V/CAR_DVR(20874): 将第 8 帧提交到 enc 08-13 17:24:15.317: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:15.577: V/CAR_DVR(20874): 将第 9 帧提交到 enc 08-13 17:24:15.587: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:15.847: V/CAR_DVR(20874): 将第 10 帧提交到 enc 08-13 17:24:15.847: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:16.107: V/CAR_DVR(20874): 将第 11 帧提交到 enc 08-13 17:24:16.107: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:16.377: V/CAR_DVR(20874): 将第 12 帧提交到 enc 08-13 17:24:16.377: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:16.637: V/CAR_DVR(20874): 将第 13 帧提交到 enc 08-13 17:24:16.637: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:16.897: V/CAR_DVR(20874): 将第 14 帧提交到 enc 08-13 17:24:16.897: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:17.157: V/CAR_DVR(20874): 将第 15 帧提交到 enc 08-13 17:24:17.157: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:17.427: V/CAR_DVR(20874): 将第 16 帧提交到 enc 08-13 17:24:17.427: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:17.697: V/CAR_DVR(20874): 将第 17 帧提交到 enc 08-13 17:24:17.697: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:17.987: V/CAR_DVR(20874): 将第 18 帧提交到 enc 08-13 17:24:17.987: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:18.257: V/CAR_DVR(20874): 将第 19 帧提交到 enc 08-13 17:24:18.257: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:18.297: V/CAR_DVR(20874):发送输入EOS(零长度帧)08-13 17:24:18.297:V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:18.297:D/CAR_DVR(20874):-完成-
【问题讨论】:
-
如果循环直到在输出上看到 EOS,而不是在输入上提供 EOS 后立即停止,它是否有效?我想知道它是否正在缓冲输出,因为输入是微不足道的,并且您没有看到实际输出,因为通过编解码器的传播延迟意味着您在有机会提供输出之前退出循环。另外,你应该去掉
Thread.sleep(),并根据帧号计算ptsUsec。 -
谢谢您的回答。如果我循环直到在输出上看到 EOS,我将采用无限循环。 EOS 永远不会输出。我认为在这种情况下传播延迟无关紧要 - 编解码器有足够的时间进行编码 - 超过 1/30 秒。
-
谢谢。解决了。问题是,我没有计算 ptsUsec。我只是添加 ptsUsec=ptsUsec+33;现在一切正常。
标签: android android-mediacodec