【问题标题】:Encoding video with MediaCodec - have empty output buffer使用 MediaCodec 编码视频 - 输出缓冲区为空
【发布时间】:2014-10-06 18:00:18
【问题描述】:

我想从YUV images 序列创建mp4 video。我在我的 Nexus 5、Android 4.4 上测试此代码

问题是我没有来自encoder 的输出数据。 编码器只给我 2 次数据

  • 第一次 26 字节的 csd-0 csd-1
  • 第二次 3K 编码数据?

然后 encoder.dequeueOutputBuffer(info, TIMEOUT_USEC) 总是 return -1INFO_TRY_AGAIN_LATER

代码

    String type="video/avc";

    MediaCodecInfo codecInfo = selectCodec(type);
    int colorFormat = selectColorFormat(codecInfo, type); // This return 21

    MediaFormat format = MediaFormat.createVideoFormat(type,
            videowidth, videoheight); //"video/avc" 1280 720
    // Set some properties
    format.setInteger(MediaFormat.KEY_COLOR_FORMAT, colorFormat);
    format.setInteger(MediaFormat.KEY_BIT_RATE, 17000000);
    format.setInteger(MediaFormat.KEY_FRAME_RATE, 30);
    format.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 10);
    format.setInteger(MediaFormat.KEY_WIDTH,videowidth);
    format.setInteger(MediaFormat.KEY_HEIGHT,videoheight);

    encoder = MediaCodec.createByCodecName(codecInfo.getName());
    encoder.configure(format, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);
    encoder.start(); //ок

    ByteBuffer[] encoderInputBuffers = encoder.getInputBuffers();
    ByteBuffer[] encoderOutputBuffers = encoder.getOutputBuffers();

    BufferInfo info = new BufferInfo();
    int k = 0; // just counter
    int inputBufIndex;
    int encoderStatus=0;
    int col=20; // i want to encode 20 frames


    info = new BufferInfo();

    while (k < col) {
        k++;
            try {
                Thread.sleep(33); //some pause
            } catch (InterruptedException e) {
                // TODO Auto-generated catch block
                e.printStackTrace();
            }


            //input to buffer always works fine
            inputBufIndex = encoder.dequeueInputBuffer(TIMEOUT_USEC);

            if (inputBufIndex >= 0) {

                if (k == col) { //EOS
                    encoder.queueInputBuffer(inputBufIndex, 0, 0, ptsUsec,
                            MediaCodec.BUFFER_FLAG_END_OF_STREAM);
                    Log.v(TAG, "sent input EOS (with zero-length frame)");
                } else {

                    ByteBuffer inputBuf = encoderInputBuffers[inputBufIndex];

                    inputBuf.clear();

                    byte[] frameData = new byte[videowidth * videoheight * 3 / 2]; //1 plane w*h Y + 2 planes w*h/2 Cb Cr

                    Arrays.fill(frameData, (byte) 0); // zero for example 
                    inputBuf.put(frameData);
                    encoder.queueInputBuffer(inputBufIndex, 0,
                            frameData.length, ptsUsec, 0);
                    Log.v(TAG, "submitted frame " + k + " to enc");
                }

            } else {
                // either all in use, or we timed out during initial setup
                Log.v(TAG, "input buffer not available");
            }


            // output Buffer have problems
             info = new BufferInfo();
             encoderStatus = encoder.dequeueOutputBuffer(info, TIMEOUT_USEC);
            // 1-st time encoderStatus =-2 INFO_OUTPUT_FORMAT_CHANGED
            // 2-nd time encoderStatus =0
            // 3 to 20 times encoderStatus =-1
            if (encoderStatus == MediaCodec.INFO_TRY_AGAIN_LATER) {
                // no output available yet
                Log.v(TAG, "no output from encoder available");
            } else if (encoderStatus == MediaCodec.INFO_OUTPUT_BUFFERS_CHANGED) {
                encoderOutputBuffers = encoder.getOutputBuffers();
                Log.v(TAG, "encoder output buffers changed");

            } else if (encoderStatus == MediaCodec.INFO_OUTPUT_FORMAT_CHANGED) {
                Log.v(TAG, "encoder output format changed: " +encoder.getOutputFormat() );
            } else if (encoderStatus < 0) {
                 Log.v(TAG, "unexpected result from encoder.dequeueOutputBuffer: " + encoderStatus);
            } else { // encoderStatus >= 0
                ByteBuffer encodedData = encoderOutputBuffers[encoderStatus];
                if (encodedData == null) {
                     Log.v(TAG, "encoderOutputBuffer " + encoderStatus + " was null");
                } 
                else 
                {
                    Log.v(TAG, "encoderOutputBuffer " + info.size+" | "+encoderStatus+" | "+info );
                }




                encoder.releaseOutputBuffer(encoderStatus, false);
            } 

    }

    Log.d(TAG, "-finish-");

日志:


08-13 17:23:32.927: V/CAR_DVR(20874): 编码器输出格式: {帧率=30,比特率=17000000,高度=720,mime=视频/avc, 颜色格式=21,i-frame-interval=10,宽度=1280} 08-13 17:23:35.347: V/CAR_DVR(20874): 提交帧 1 到 enc 08-13 17:23:37.637: V/CAR_DVR(20874):编码器输出格式改变: {csd-1=java.nio.ByteArrayBuffer[位置=0,限制=8,容量=8], 高度=720,哑剧=视频/avc, csd-0=java.nio.ByteArrayBuffer[位置=0,限制=18,容量=18], 什么=1869968451,宽度=1280} 08-13 17:23:38.537:V/CAR_DVR(20874): 将第 2 帧提交给 enc 08-13 17:23:39.177: V/CAR_DVR(20874): 编码器输出缓冲区 26 | 0 | android.media.MediaCodec$BufferInfo@4264dfb0 08-13 17:23:40.007: V/CAR_DVR(20874): 将第 3 帧提交到 enc 08-13 17:23:55.207: V/CAR_DVR(20874):编码器输出缓冲区 3625 | 1 | android.media.MediaCodec$BufferInfo@42654b60 08-13 17:23:57.067: V/CAR_DVR(20874): 将第 4 帧提交到 enc 08-13 17:24:03.187: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:10.167: V/CAR_DVR(20874): 将第 5 帧提交到 enc 08-13 17:24:14.477: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:14.787: V/CAR_DVR(20874): 将第 6 帧提交到 enc 08-13 17:24:14.787: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:15.047: V/CAR_DVR(20874): 将第 7 帧提交到 enc 08-13 17:24:15.047: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:15.317: V/CAR_DVR(20874): 将第 8 帧提交到 enc 08-13 17:24:15.317: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:15.577: V/CAR_DVR(20874): 将第 9 帧提交到 enc 08-13 17:24:15.587: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:15.847: V/CAR_DVR(20874): 将第 10 帧提交到 enc 08-13 17:24:15.847: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:16.107: V/CAR_DVR(20874): 将第 11 帧提交到 enc 08-13 17:24:16.107: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:16.377: V/CAR_DVR(20874): 将第 12 帧提交到 enc 08-13 17:24:16.377: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:16.637: V/CAR_DVR(20874): 将第 13 帧提交到 enc 08-13 17:24:16.637: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:16.897: V/CAR_DVR(20874): 将第 14 帧提交到 enc 08-13 17:24:16.897: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:17.157: V/CAR_DVR(20874): 将第 15 帧提交到 enc 08-13 17:24:17.157: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:17.427: V/CAR_DVR(20874): 将第 16 帧提交到 enc 08-13 17:24:17.427: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:17.697: V/CAR_DVR(20874): 将第 17 帧提交到 enc 08-13 17:24:17.697: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:17.987: V/CAR_DVR(20874): 将第 18 帧提交到 enc 08-13 17:24:17.987: V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:18.257: V/CAR_DVR(20874): 将第 19 帧提交到 enc 08-13 17:24:18.257: V/CAR_DVR(20874):编码器无可用输出 08-13 17:24:18.297: V/CAR_DVR(20874):发送输入EOS(零长度帧)08-13 17:24:18.297:V/CAR_DVR(20874):编码器无输出可用 08-13 17:24:18.297:D/CAR_DVR(20874):-完成-

【问题讨论】:

  • 如果循环直到在输出上看到 EOS,而不是在输入上提供 EOS 后立即停止,它是否有效?我想知道它是否正在缓冲输出,因为输入是微不足道的,并且您没有看到实际输出,因为通过编解码器的传播延迟意味着您在有机会提供输出之前退出循环。另外,你应该去掉Thread.sleep(),并根据帧号计算ptsUsec
  • 谢谢您的回答。如果我循环直到在输出上看到 EOS,我将采用无限循环。 EOS 永远不会输出。我认为在这种情况下传播延迟无关紧要 - 编解码器有足够的时间进行编码 - 超过 1/30 秒。
  • 谢谢。解决了。问题是,我没有计算 ptsUsec。我只是添加 ptsUsec=ptsUsec+33;现在一切正常。

标签: android android-mediacodec


【解决方案1】:

问题是,我没有计算 ptsUsec。我只是添加 ptsUsec=ptsUsec+33;现在一切正常。
ptsUsec - 呈现时间 - 是当前帧的时间。
当 ptsUsec 没有改变时,认为它已经被编码的帧的编解码器什么都不做

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 2014-04-30
    • 2016-05-01
    • 2014-09-26
    • 2013-07-09
    • 2016-03-12
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多