【问题标题】:android - setting presentation time of mediacodecandroid - 设置媒体编解码器的呈现时间
【发布时间】:2016-07-07 00:05:29
【问题描述】:

我使用波纹管代码将原始数据编码为 h264 以创建视频,它的编码非常好,但视频播放速度太快。演示时间似乎有问题。当记录开始时,我设置“tstart”的值,并为每一帧计算当前时间与 tstart 的差异,并将其传递给 queueinputbuffer,但没有任何改变。哪个部分有问题?我知道在 android 4.3 中我可以将表面传递给 mediacodec,但我想支持 android 4.1。提前致谢。

 public void onPreviewFrame(final byte[] bytes, Camera camera) {
                    if (recording == true) {
                        long time = System.nanoTime();
                        time -= tstart;
                        if(mThread.isAlive()&&recording == true) {
                            encode(bytes, time );

                        }

                    }
 }

private synchronized void encode(byte[] dataInput,long time)
{
    byte[] data=new byte[dataInput.length];
    NV21toYUV420Planar(dataInput,data,640,480);

    inputBuffers = mMediaCodec.getInputBuffers();// here changes
    outputBuffers = mMediaCodec.getOutputBuffers();

    int inputBufferIndex = mMediaCodec.dequeueInputBuffer(-1);

    if (inputBufferIndex >= 0) {
        ByteBuffer inputBuffer = inputBuffers[inputBufferIndex];
        inputBuffer.clear();
        inputBuffer.put(data);
        time/=1000;
        mMediaCodec.queueInputBuffer(inputBufferIndex, 0, data.length, time, 0);

    } else {
        return;
    }

    MediaCodec.BufferInfo bufferInfo = new MediaCodec.BufferInfo();
    int outputBufferIndex = mMediaCodec.dequeueOutputBuffer(bufferInfo, 0);
    Log.i("tag", "outputBufferIndex-->" + outputBufferIndex);
    do {
        if (outputBufferIndex >= 0) {
            ByteBuffer outBuffer = outputBuffers[outputBufferIndex];
            byte[] outData = new byte[bufferInfo.size];
            outBuffer.get(outData);
            try {
                if (bufferInfo.offset != 0) {
                    fos.write(outData, bufferInfo.offset, outData.length
                            - bufferInfo.offset);
                } else {
                    fos.write(outData, 0, outData.length);
                }
                fos.flush();
                Log.i("camera", "out data -- > " + outData.length);
                mMediaCodec.releaseOutputBuffer(outputBufferIndex, false);
                outputBufferIndex = mMediaCodec.dequeueOutputBuffer(bufferInfo,
                        0);
            } catch (IOException e) {
                e.printStackTrace();
            }
        } else if (outputBufferIndex == MediaCodec.INFO_OUTPUT_BUFFERS_CHANGED) {
            outputBuffers = mMediaCodec.getOutputBuffers();
        } else if (outputBufferIndex == MediaCodec.INFO_OUTPUT_FORMAT_CHANGED) {
            MediaFormat format = mMediaCodec.getOutputFormat();
        }
    } while (outputBufferIndex >= 0);
}

【问题讨论】:

    标签: java android encode android-mediacodec mediamuxer


    【解决方案1】:

    您的问题是您根本没有将输出帧写入实际存储任何时间戳的容器中。您正在编写一个普通的 H264 文件,它只包含原始编码帧,没有索引,没有时间戳,没有音频,没有别的。

    为了获得文件的正确时间戳,您需要使用MediaMuxer(在 4.3 中出现)或类似的第三方库(例如 libavformat 或类似库)将编码的数据包写入文件。输出包的时间戳在bufferInfo.presentationTime中,而在if (outputBufferIndex >= 0) {子句中,你根本不用它——你基本上是在扔掉时间戳。

    【讨论】:

    • 那么 queueinputbuffer 函数的第四个参数presentationTimeUs是什么?
    • 即输入帧的呈现时间。在大多数/所有情况下,它实际上并不包含在编码数据中,它只是与编码帧一起带来,以便您知道编码数据包对应的时间戳。将编码数据包写入文件时,您需要将其 (bufferInfo.presentationTimeUs) 提供给文件(将其提供给 MediaMuxer API,或提供给您用于编写视频文件的其他库)。
    • @SajadNorouzi 数据包不必按照它们进入的顺序从编码器中出来。因此,如果没有传递时间戳,您可能无法将时间戳与输出数据包匹配.
    猜你喜欢
    • 2014-02-18
    • 1970-01-01
    • 1970-01-01
    • 2012-08-19
    • 1970-01-01
    • 1970-01-01
    • 2015-03-21
    • 2016-09-21
    • 2014-05-26
    相关资源
    最近更新 更多