firebase - MLKit 旋转面部图像使其笔直（iOS 和 Android）

Question

我正在开发一个使用 Firebase 的 MLKit 进行人脸检测的应用程序。然后我获取检测到的人脸并通过自定义 tensorflow 模型运行它

问题是我的自定义张量流模型期望面部是直的。如果用户的脸完全旋转，我不会得到准确的结果

有什么方法可以旋转面部图像使其笔直？我将如何使用 MLKit 做到这一点？

我目前获取人脸图像的方法是使用 AVCaptureSession (iOS) 并根据 mlkit 在人脸对象中给我的边界剪切图像。它可以工作，但如果用户的脸不直，我最终会得到一个旋转的脸

标签： firebaseface-detectionfirebase-mlkitgoogle-mlkitfirebase-machine-learning

Answer 1

您可以使用此头部旋转度数将头部向后旋转。但它可能只适用于头部旋转在 XY 平面内的 EulerAngleZ()。