将颤振的 CameraImage 转换为文件

Question

我正在尝试运行人脸识别并且需要来自相机的图像/文件流。
我决定使用 Flutters 自己的相机库camera: 0.2.9+1。
CameraController.startImageStream(Function(CameraImage) onAvailable) 方法很有希望，但我不知道如何将 CameraImage 数据转换为人脸识别可读的数据。

其他人解决了这个问题吗？

Answer 1

CameraImage 通常是 YUV 420 格式。 （测试cameraImage.format.group确认。）

这适用于 Firebase ML，因为这是它所期望的格式。有用的演示here。但是，其他识别器可能需要其他格式（例如，AWS 需要 JPEG 或 PNG）。

YUV 使用色度二次采样很难转换。此外，出于性能考虑，您可能希望使用本机代码。在 Android 上有一个 YUVImage 类，您可以将飞机传递到其中。它有一种转换为JPEG的方法。创建一个插件或方法通道以将平面传递给 YUVImage，让它自己保存到 ByteArrayOutputStream 并返回字节。