我从 640x480（对我来说足够）的 android 相机中获取相机预览帧，并对它们进行一些修改。但现在我需要将它们编码为新的MP4 文件（带音频）。
这怎么可能？我不能使用ffmpeg，因为它的许可证不太好，但我发现Stagefright 框架应该可以做到这一点。但是我没有找到任何官方文档或教程来做我需要做的事情。
请问有没有办法用这个框架做到这一点？我不需要代码，我会很高兴为我指出正确的方向。
【问题讨论】：
标签： android camera capture frames stagefright
有一种场景可以实现所描述的用例。考虑将Camera 输出馈送到OpenGL 库的场景，其中一些效果应用于需要记录的预览帧。
在这种情况下，您可以将传统的MediaRecorder 与GrallocSource 一起使用，而不是CameraSource。设置如下所示：
MediaRecorder 设置为GrallocSource。用于记录的输入表面由实现SurfaceTextureClient 的Camera + OpenGL 组合操作提供。在SurfaceMediaSource_test modules 中可以找到一个很好的例子。
【讨论】：
stagefright 非常好。但正如你所见，这个框架不是官方的。您可以使用platform/frameworks/av 中的示例代码，风险自负。
google 源包括 CameraSource，它直接将相机帧提供给编码器。虽然这种方法可能更有效（像素根本不会复制到用户空间），但它不允许操作。可以修改 C++ 源代码，但我强烈建议使用 Java 访问 Camera，并通过 JNI 将 preview frames 传递给 stagefrght (OpenMAX) 编码器。在某些设备上，这可能会迫使您使用软件编码器。您必须将视频帧转换为编码器的 YUV 平面格式。请参阅 libyuv 了解优化的转换器。
如果您可以限制对 API 16 及更高版本的支持，则使用官方 Java MediaCdec API 会更安全。
【讨论】：