安卓视频精确定位

Question

我正在使用MediaExtractor的seekTo()进行精确寻找的挣扎。虽然我可以无问题地寻找同步帧，但我想要寻找特定时间。这个问题给了我一些如何做到这一点的想法，但我不确定它们是否有效。基本上，我需要寻找最近的前一个同步帧，然后advance()提取器直到达到目标时间。在整个过程中，每帧都会被馈送到解码器，即第一个I帧和其余P帧。这是相关代码段（基于google/grafika的MoviePlayer）：

extractor.seekTo((long) seekTarget[threadNr], MediaExtractor.SEEK_TO_PREVIOUS_SYNC);

...

while (extractor.getSampleTime() < (long) seekTarget[threadNr]) {
    Log.d(TAG, "Thread " + threadNr + " advanced to timestamp " + extractor.getSampleTime());

    int inputBufIndex = decoder.dequeueInputBuffer(TIMEOUT_USEC);
    if (inputBufIndex >= 0) {
        ByteBuffer inBufer = decoderInputBuffers[inputBufIndex];
        int chunkSize = extractor.readSampleData(inBufer, 0);

        if (chunkSize < 0) {
            // End of stream -- send empty frame with EOS flag set.
            decoder.queueInputBuffer(inputBufIndex, 0, 0, 0L,
                    MediaCodec.BUFFER_FLAG_END_OF_STREAM);
            inputDone = true;
            if (VERBOSE) Log.d(TAG, "sent input EOS");
        } else {
            if (extractor.getSampleTrackIndex() != trackIndex) {
                Log.w(TAG, "WEIRD: got sample from track " +
                        extractor.getSampleTrackIndex() + ", expected " + trackIndex);
            }

            long presentationTimeUs = extractor.getSampleTime();
            decoder.queueInputBuffer(inputBufIndex, 0, chunkSize,
                    presentationTimeUs, 0 /*flags*/);
            if (VERBOSE) {
                Log.d(TAG, "submitted frame " + inputChunk + " to dec, size=" +
                        chunkSize + " inputBufIndex: " + inputBufIndex);
            }
            inputChunk++;
            extractor.advance();
        }
    }
}

如你所知，我通常要排队处理大量的帧，但目前我可以接受内存消耗或最终的延迟。问题是在循环中，dequeueInputBuffer() 方法仅在某段时间内起作用，最终卡在返回-1处，根据文档，这意味着缓冲区不可用。如果我将 TIMEOUT_USEC 更改为 -1，我会得到无限循环。

请问有人能告诉我这种方法是否正确，或者为什么在某些时候我无法访问 inputBuffer 吗？

- Krzysztof Kansy

Answer 1

您似乎没有从输出端拉取缓冲区。MediaCodec解码器不会丢失帧，因此当其内部缓冲区填满时，它将停止向您处理输入缓冲区。

您需要通过请求输出缓冲区来排空解码器。释放缓冲区时，将“render”标志设置为false，这样它就不会显示在屏幕上。

- fadden